gpt4 book ai didi

google-bigquery - 将数据流式传输到 Bigquery

转载 作者:行者123 更新时间:2023-12-01 13:47:18 25 4
gpt4 key购买 nike

我正在尝试将数据从 Scala 应用程序流式传输到 BQ。查看 Streaming Data Into BigQuery 中列出的示例我看到数据需要作为 Map<String, Object> 传入使用 TableDataInsertAllRequest.Rows().setJson() .

  • 这是传递数据的唯一方法吗?
  • 鉴于这表示将由 BQ 连接器库作为 JSON 流式传输的数据,是否可以以 JSON 化字符串格式而不是 Map<String, Object> 传递数据?如果没有,有什么理由吗?
  • 最佳答案

    不幸的是,通过我们(或任何 Google Cloud Platform)API 生成的库不支持直接写出请求正文。这可能有助于确保请求的有效性。也就是说,在客户端库方面有积极的工作,辅助方法似乎是一个合理的要求。出于上述验证目的,开销可能仍然存在(解析为客户端表示),但客户端接口(interface)对于您的场景会更简单一些。

    我会转达你的要求。同时,这个问题的答案提到了一个似乎可以简化您的翻译工作的库:

    Convert Json to Map

    关于google-bigquery - 将数据流式传输到 Bigquery,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/34985583/

    25 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com