gpt4 book ai didi

google-cloud-dataflow - 取消作业而不会丢失 DataFlow 上的数据

转载 作者:行者123 更新时间:2023-12-04 12:18:53 28 4
gpt4 key购买 nike

我试图找到一种优雅地结束我的工作的方法,以免丢失任何数据,从 PubSub 流式传输并写入 BigQuery。

我可以设想的一种可能方法是让作业停止提取新数据,然后运行直到它处理完所有内容,但我不知道这是否/如何实现。

最佳答案

看来这个功能是在最新版本中添加的。

您现在要做的就是选择 drain option取消作业时。

谢谢。

关于google-cloud-dataflow - 取消作业而不会丢失 DataFlow 上的数据,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/35223370/

28 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com