gpt4 book ai didi

azure - 使用 az cli 监视数据工厂管道运行无法按预期工作,并且缺少管道运行?

转载 作者:行者123 更新时间:2023-12-03 00:19:24 24 4
gpt4 key购买 nike

我正在尝试从 Azure 数据工厂获取最新的管道运行日志,其中管道每 10 分钟左右运行一次。

我正在使用以下 az-cli 命令:

 az datafactory pipeline-run query-by-factory --factory-name XXXXX --last-updated-after $last_updated_after --last-updated-before $last-updated-before --resource-group XXXXX

其中 $last_updated_after 和 $last_updated_before 定义如下:

(Python code sample)
last_updated_after = (datetime.datetime.now() - datetime.timedelta(hours=3)).isoformat()
last_updated_before = (datetime.datetime.now()).isoformat()

文档不太清楚这两个参数代表什么,但它们应该像时间窗口过滤器一样工作,用于选择我们的管道运行。

但是,我只能获取 X 小时前发生的管道运行(如 last_updated_after 所定义),而不会获取不到 X 小时前发生的管道运行。

如果我使用小时数 =2 或更少,即使过去两个小时内有管道运行,我也不会得到任何结果。

这是一个错误吗?有解决办法或替代方案吗?

最佳答案

  • 我们还尝试在我们的环境中使用 az cli 命令监控数据工厂管道的运行。
  • 当我们给出 last-updated-afterlast-updated-before 各自的值时,但在使用filter之后,我们也会得到空值在pipeline上然后得到结果。
  • 管道实际运行时的时间 (iso) 格式和我们通过 az cli 命令获取的时间存在一些滞后。

是的,我们确实有替代解决方案来解决此问题,以直接监控所有管道的运行。

  • 选择 Azure 门户数据工厂边栏选项卡上的监视和管理磁贴以启动监视体验。
  • 如果您已进入 ADF UX,请转到左侧边栏并点击监视器 图标。
  • 这是直接监控所有管道运行的最简单方法。

enter image description here

引用: Visually monitor Azure Data Factory

筹集support ticket以便支持工程师对此进行更多调查。

关于azure - 使用 az cli 监视数据工厂管道运行无法按预期工作,并且缺少管道运行?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/72415356/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com