gpt4 book ai didi

azure - 如何通过 Azure Data Lake Store gen1 中的新文件触发 Azure Data Factory v2 或 Azure Databricks Notebook 中的管道

转载 作者:行者123 更新时间:2023-12-05 06:31:04 24 4
gpt4 key购买 nike

我使用Azure Data Lake Store gen1来存储 JSON 文件。基于这些文件,我在 Azure Databricks 中有笔记本来处理它们。现在,我想在 Azure Data Lake Store gen1 中创建新文件时触发这样的 Azure Databricks 笔记本。我找不到任何可以做到这一点的触发器。你知道有什么办法吗?

最佳答案

目前,尚未Microsoft实现/支持。但这在他们的路线图上(我相信)。

您可以通过两种方式做到这一点,

  1. Azure Functions(通过事件网格)

  2. 逻辑应用

<小时/>

选项#1

目前,微软正在#1 的基础上进行构建。

您可以跟踪问题here .

按照这个

This feature is not a high priority for us right now, but I will note that the announcement for Azure Event Grid listed Data Lake as one of the integrations they are building. Once you can subscribe to Data Lake updates through Event Grid, running an Azure Function would be trivial (see here for some info).

您可以vote your voice支持 DataLake 中的事件网格(提供程序)。

<小时/>

选项#2

这也尚未实现,但您可以Upvote your voice这里支持这个功能

关于azure - 如何通过 Azure Data Lake Store gen1 中的新文件触发 Azure Data Factory v2 或 Azure Databricks Notebook 中的管道,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/51919859/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com