Azure 数据工厂悄无声息地落后于计划

Question

我在 ADF 上运行了许多事件，其中一些每天运行一次，一些每小时运行一次，每 15 分钟运行一次。

我找到了设置方法alerts在 ADF 中，以便失败的事件将触发电子邮件。然而，我还没有找到创建更详细的自定义警报的方法。

在本例中，任务每 15 分钟运行一次

"scheduler": {
                "frequency": "Minute",
                "interval": 15
}

设置为一次运行一个

"policy": {
                "concurrency": 1
            },

不幸的是，该事件被无限期锁定了几天。可能是资源锁。这导致所有时间片都处于挂起状态。等待并发。由于初始事件切片没有失败，因此我没有收到任何警报和警告。

有人知道如何监控 ADF 中的故障(例如切片错过计划)吗？

Answer 1

一种方法是将问题转化为失败。

您可以将timeout属性添加到管道执行策略中:

"policy": {
    "concurrency": 1,
    "timeout":"00:15:00"
}

如果超时，您的管道执行和相关数据集切片将在 15 分钟后失败。