database - 分析与 OLTP 数据库

Question

我有一个主要用例，我想拥有一个我正在使用 Postgres 的事务关系数据库。

我还需要对数据运行频繁的聚合查询(计数、总和、平均值)。这些统计数据无法预先计算，因为我们必须提供多个搜索过滤器。

我最初考虑使用 Redshift 作为辅助存储，它可以为这些查询提供服务，但后来我还需要构建一个系统来保持两个存储之间的数据同步。

有没有更好的方法来实现这一目标？

Answer 1

看看 AWS DMS，您可以将其设置为在 Redshift 上保留 Postgres 数据的近乎实时的副本。

它是可靠的并且需要最少的维护(例如，如果您向源数据添加新列)。

仔细阅读这两项内容，尤其是限制和要求。

https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Source.PostgreSQL.html和 https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Target.Redshift.html

除非您需要它们，否则我建议从同步中排除文本(和其他大对象)列。这可以通过设置标志轻松完成，也可以逐列定制。

源 Postgres 数据库不必保存在 AWS 上。