google-bigquery - 奇怪的问题: Bigquery dataset not found

Question

我们的 BQ 数据集之一无法再通过 BQ Web UI 和 Cloud Shell 访问。

打开 UI 后立即显示消息“未找到:数据集项目:数据集”。

我们还尝试了几个 bq shell 命令:

• bq ls:成功列出“丢失”的数据集
• bq ls 数据集:返回“ls 操作中的 BigQuery 错误:未找到:数据集项目:数据集”

但是我们能够查询内部 View 并通过 PowerBI 访问数据集的内容。

IAM 权限:所有者

有人遇到类似问题吗？

Answer 1

我遇到了类似的问题 - 当我调用 ListDatasets() 时，BigQuery 客户端库会列出数据集，但尝试使用相同的数据集 ID 调用 UploadCsv() 将返回 404 未找到数据集。

事实证明，这是因为我在创建数据集时选择了“asia-northeast1”作为数据位置 - 它不会告诉您在创建数据集时该区域的处理方式有所不同，但 BigQuery docs 中的一行表示:

If your data is in a location other than the US or EU multi-regional location, you must specify the location when you perform actions such as loading data, querying data, and exporting data.

在美国地区重新创建数据集解决了我的问题。或者您可以使用上面文档中的选项每次都指定“asia-northeast1”位置。