gpt4 book ai didi

apache-beam - 调用 API 是否违反 Apache Beam 编程模型?

转载 作者:行者123 更新时间:2023-12-03 16:25:45 25 4
gpt4 key购买 nike

使用Apache Beam丰富数据时,对每个数据项都进行一次API调用会不会出错?

(我是 Apache Beam 的新手)

最佳答案

不,但您可以批处理 API 调用以获得更好的性能。查看 this 中的“批处理 RPC”示例博客文章。

另一件需要注意的事情是,beam 不能保证外部 API 调用恰好一次。如果有问题的管道需要一次性 QoS,您应该努力使 API 调用具有幂等性。

关于apache-beam - 调用 API 是否违反 Apache Beam 编程模型?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/45318056/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com