gpt4 book ai didi

azure - 将计算实例添加到 Azure Synapse(专用池)

转载 作者:行者123 更新时间:2023-12-03 05:29:13 26 4
gpt4 key购买 nike

我有一个在 Azure Synapse 专用池上运行的 DWH。

除了现有的夜间/每日 ETL 流程之外,我还需要并行添加另一个流程,这会降低当前实例的性能。该流程只需每月在白天运行 1 周。

与雪花方法类似,是否可以设置独立 Azure Synapse 计算来处理与第一个实例相同的数据?不是数据的副本,而是同一文件中的相同数据。

或者我应该简单地每天更改实例大小 2 次,每月 1 个弱实例吗? (需要暂停所有事件)

如有任何建议,我们将不胜感激!

谢谢!

最佳答案

我同意扩展或使用无服务器 SQL 池是一个不错的选择。

在实现之前,我还会评估您添加的附加(和/或现有)流程是否针对 MPP 进行了适当优化。首先验证您是否通过利用常见的哈希分布来尽可能有效地共同定位数据。通常,首先为 SQL Server (SMP) 编写的 ETL 需要一定量的重构才能真正利用 MPP 的强大功能。

  1. 查看长时间运行作业的查询计划 - 是否存在过多的数据广播或混洗?通过更新表分布进行修复
  2. 是否有可用且最新的统计数据?

关于azure - 将计算实例添加到 Azure Synapse(专用池),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/66534032/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com