gpt4 book ai didi

google-cloud-platform - 更新 Google Cloud Datastore 中 KIND 的所有实体

转载 作者:行者123 更新时间:2023-12-05 04:55:15 24 4
gpt4 key购买 nike

我们在 Datastore 中拥有约 1000 万个实体或特定种类的数据集。我们想要更改产品功能,因此我们想要更改所有 Kind 实体上的字段。

是否有一种智能/快速的方法可以做到这一点,而不涉及迭代所有系列中的实体?

最佳答案

也许你可以使用Dataflow帮助您解决问题。

Dataflow 是一种流式和批式数据处理服务,完全由 GCP 管理。

它在 Apache Beam 中开源项目。它与此 SDK 完全兼容。这使您可以在本地测试您的开发,然后再在 GCP 上运行它们。

它公开了两个主要概念,PCollection,基本上是工具正在处理的数据,以及管道,捕获数据所需的不同步骤,必须执行的转换,以及应如何以及在何处写入所获得的结果。

它为 Java, Python and Go 提供支持,以及丰富的功能集和各种可能的数据源和转换。

在 Datastore 的特定情况下,Dataflow 提供读取、写入和删除数据的支持。参见例如 relevant documentation for Python .

你可以看到一个good example了解如何与 Apache Beam Github 存储库中的数据存储进行交互。

另外两篇文章可能也很有趣:1 2 .

关于google-cloud-platform - 更新 Google Cloud Datastore 中 KIND 的所有实体,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/65477737/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com