postgresql - 将数据从 S3 加载到 PostgreSQL RDS

Question

我们计划在 AWS 环境中使用 PostgreSQL RDS。 S3 中有一些我们需要每周加载的文件。我在 AWS 文档中没有看到我们可以将数据从 S3 加载到 PostgreSQL RDS 的任何选项。我看到 Aurora 有可能，但找不到 PostgreSQL 的任何内容。任何帮助将不胜感激。

Answer 1

一种选择是使用 AWS Data Pipeline。它本质上是一个 JSON 脚本，允许您在 AWS 上编排源之间的数据流。

AWS 提供了一个模板，用于在 S3 和 MySQL 之间移动数据。你可以找到它here .您可以轻松地遵循此操作并将 MySQL 参数与与您的 Postgres 实例相关联的参数进行交换。 Data Pipeline 只是将 RDS 作为类型查找，并不区分 MySQL 和 Postgres 实例。

Scheduling Data Pipeline 也支持，因此您可以自动执行每周的文件传输。

开始这个:

• 转到您的 AWS 控制台中的 Data Pipeline 服务
• 在源代码下选择“从模板构建”
• 选择“将 S3 加载到 MySQL 表”模板
• 填写其余字段并创建管道

从那里，您可以在控制台中监控管道的进度!