google-bigquery - 错误: Response too large to return in big query

Question

我正在尝试运行查询“ select * from tablename ”。
但是它会引发类似“错误:响应太大而无法返回”的错误。

我能够处理其他一些包含TB数据的表。但是我收到包含294 MB的表的此错误。

我能够通过选择列名来选择表，但有一些限制，使其无法处理select查询中的所有列。
在我的选择查询中，我总共有26列，但是我能够选择16列而没有错误。
“从表名中选择column1，column2，column3，.... column16”。

与表的列和大小有关系吗？

请帮助我解决此问题。

大查询表详细信息:

总记录数:683,038

table 大小:294 MB

栏数:26

Answer 1

在作业配置中将allowLargeResults设置为true。您还必须使用allowLargeResults标志指定目标表。

如果通过API查询，

"configuration": 
  {
    "query": 
    {
      "allowLargeResults": true,
      "query": "select uid from [project:dataset.table]"
      "destinationTable": [project:dataset.table]

    }
  }

如果使用bq命令行工具，

$ bq query --allow_large_results --destination_table "dataset.table" "select uid from [project:dataset.table]"

如果使用浏览器工具，

• Click 'Enable Options'
• Select 'Allow Large Results'