gpt4 book ai didi

mysql - MySQL 到 SQL Server over WAN 的 ETL 机制

转载 作者:行者123 更新时间:2023-11-29 04:30:59 32 4
gpt4 key购买 nike

我正在寻找有关通过 VPN 将外部主机的 MySQL Community Server 5.1.32 数据批处理到内部 SQL Server 05 Enterprise 机器的机制的一些反馈。外部盒子在整个工作时间内积累数据(每天大约 100Mb),然后需要在进行某些 BI 工作之前通过 WAN 连接(质量尚未确定但不会超快)在国际范围内传输到内部企业环境执行。这应该只是每晚进行的更改集。

我对人们之前在类似场景中成功使用的 ETL 机制的想法很感兴趣。 SSIS 似乎是一个潜在的候选者;谁能评论这种情况的适用性?或者,将非常感激关于如何以成本意识的方式做到这一点的其他想法。谢谢!

最佳答案

这取决于您对从外部机器接收的数据的使用情况。

如果您必须拥有第二天早上的计算数据,或者对您的网络没有信心,您更愿意将两个系统松散耦合并在它们之间启用一些消息队列,这样如果在计算期间出现故障像数据库、网络链接这样的夜晚,任何让你恢复起来会很痛苦的事情,你都可以每天早上从一些数据开始。

如果数据检索不受高度关键性的影响,任何解决方案都很好:)

关于 SSIS,它只是一个很棒的 ETL 框架(是的,有一个微妙之处:))。但我不认为它是数据传输的一部分,而是当您的数据已收到或仍在消息队列系统中等待时在 ETL 部分。

关于mysql - MySQL 到 SQL Server over WAN 的 ETL 机制,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/2535651/

32 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com