mysql - 优化只读Mysql Slave

Question

我的增量加载项目遇到了麻烦:)

上下文:我基于 Postgres 的数据仓库每天都从我基于 Mysql 的网上商店提取数据。我们为此设置了一个只读从站，我认为这是IT给予我的最大支持，即不会对主站做任何事情来帮助我。

情况:我想将最近创建或更新的行从 MySQL 提取到 Postgres。大约每15-30分钟一次。因此，我的数据仓库在流程结束时的滞后时间最多为 30 分钟。因此，对所需的每个表进行快速循环并使用简单的日期条件就足够了。

问题:网上商店数据库非常大，处理每个表需要一段时间(每个表最多 1 分钟，日期没有索引，也没有分区)，这会损害整个项目...

问题:我可以优化那个只读的mysql从库(不对master进行任何操作)吗？

非常感谢!五、

干杯，文森特

Answer 1

对于感兴趣的人，这是我提出的解决方案:

我基本上在从站上添加了索引(而不是在主站上)。问题解决了。有趣的是，这对于 Mysql DB 是可能的，因为复制过程使用日志等。

干杯，五、