gpt4 book ai didi

java - 使用 Java 以编程方式将数据从 Google Cloud Storage 加载到 Bigquery 的选项?

转载 作者:太空宇宙 更新时间:2023-11-04 10:47:14 26 4
gpt4 key购买 nike

我一直在寻找以编程方式从 Google Cloud Storage 将数据加载到 Big Query 中的方法。我通过备份我的一种 Google 云存储并将其转储到 BigQuery 表中手动完成了此操作,并且也能够在 Android 中检索数据。我面临的唯一问题是我想以编程方式将数据上传到 BigQuery Table 中。有哪些方法可以实现这一目标?

最佳答案

您可以使用bigquery Java API 将数据从云存储加载到Bigquery。

如果您需要预先处理数据,根据规模,您可以使用 Google Dataflow 处理数据,然后加载数据或将数据流式传输到 Bigquery。 https://cloud.google.com/bigquery/streaming-data-into-bigquery

您还可以使用 Bigquery 直接搜索云存储中的文件,无需加载。 https://cloud.google.com/bigquery/external-data-sources

关于java - 使用 Java 以编程方式将数据从 Google Cloud Storage 加载到 Bigquery 的选项?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/48263275/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com