google-sheets - 将数据从 Google 表格流式传输到 BigQuery 以在 Tableau 中进行可视化

Question

我正在尝试创建从 Google Sheets 到 BigQuery 的定时自动数据上传，以便我可以在 Tableau 中可视化数据。数据源自 import.io。

基于 on我已经能够使用 Google Apps Scripts 从 Google Sheets 文件创建一个 .csv，并将 .csv 文件一次性上传到 BigQuery。但是，这不能用作重复性解决方案，因为 BigQuery 加载脚本需要 .csv 文件的静态 URL(并且每个 .csv 下载文件都有一个唯一的 URL)。

我相信来自 Google Sheets 的流数据，或者直接来自但是，已经研究过 Google BigQuery Analytics还没有能够解决这个问题。

将数据从 Google Sheets 流式传输到 BigQuery 需要哪些步骤？

Answer 1

在您链接到的示例中，csv 的 URL 不需要是静态的。该示例插入 bigquery 并直接传递八位字节/流数据，因此您需要的只是对 csv 文件的引用。

我不知道您按照哪个程序将电子表格导出到 csv，但您可以查看本教程
https://developers.google.com/apps-script/articles/docslist_tutorial#section2

您会在那里找到如何将您的 csv 数据导出为一个新文件，然后您可以使用该文件从您的 csv 导入(使用 DriveApp 文件夹对象，您可以获得对 csv 文件的引用)。