作者热门文章
- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
在Palantir Foundry平台内,我正在从事数据集成。我是Palantir软件的新手,所以需要一些帮助。是否有关于此主题的任何文档,白皮书,链接或教程?
如何整合来自其他来源(例如Amazon S3或HDFS)的数据?
最佳答案
要集成来自另一个平台的数据,您需要数据连接中的源和同步。您需要拥有平台权限才能创建这些,并非所有用户都可以,因为它可能涉及组织数据治理策略。
假设您没有具有 S3 有效配置的源。你需要创建一个。在数据连接上,单击“源”,然后单击“新建源”。然后,您可以通过两种方式执行此操作:
File System
下拉列表中的 New Source
并按照向导步骤 Custom
。 type: magritte-rest
url: 'https://foobar.organization.s3.amazonaws.com'
现在要创建同步,请使用与此类似的配置:
type: rest-source-adapter
method: GET
path: the/path/in/s3/yourdata
outputFileType: csv
还支持其他输出文件类型(
json
、
zip
,...)
关于apache-spark - 如何将 Palantir Foundry 与 Amazon S3 或 HDFS 集成,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/54297507/
我是一名优秀的程序员,十分优秀!