Azure 数据工厂与 Azure 逻辑应用

Question

尝试自学一些 ETL 技能，并需要一些帮助来了解完成某些任务的最佳方法。我正在尝试将我们的客户服务平台 Freshdesk 中的数据引入我们的 SQL 数据仓库。我们是一家微软公司，我使用 Microsoft Azure 数据工厂和 Microsoft 逻辑应用程序完成了一些类似的任务。逻辑应用程序代码量低/无代码，而且更直观，所以我现在尝试使用它。然而，我觉得数据工厂可能是最有效的方法(尽管目前还不能 100% 确定如何做到这一点)。任何帮助或正确方向的指出都值得赞赏。

Answer 1

Azure 数据工厂

If a large volume of data has to be moved from a data lake or anenterprise data warehouse (EDW) to Azure. For big data analytics, youmay need to import large amounts of data into Azure from severalsources. It is critical to achieve optimal performance and scalabilityin each circumstance.

此外，在复制事件中，您可以考虑增加 DTU/并行复制选项，这可以帮助您increase copy performance .

逻辑应用

在进行重复事件时，现代数据平台逻辑应用程序非常棒。有多种可用的连接器，看来您使用逻辑应用程序所能完成的任务的唯一限制就是您自己的想象力。

Event-Driven Architecture (EDA)范式涉及生成-

Detection, consumption, and reaction of events. Users commonly need toactivate pipelines based on storage account events, such as thearrival or deletion of a file in an Azure Blob Storage account, indata integration scenarios.

因此，Azure 数据工厂将是比 Azure 逻辑应用更好的选择，但当涉及到重复性任务时，我们可以使用 Azure 逻辑应用通过 ADF 来编排 ETL。采用哪一个的决定将在很大程度上受到当前案例的影响，并且值得探索将 ADF、逻辑应用程序和其他服务(例如函数)相结合。