google-bigquery - bq shell 加载 ^ 分隔的文件-6ren

google-bigquery - bq shell 加载 ^ 分隔的文件

转载作者：行者123 更新时间：2023-12-03 03:55:36

24

4

我们无法找到使用 bq shell 将 ^ 分隔文件推送到大查询的方法。用户界面上有一个选项可以提及除“,”之外的分隔符。

任何帮助将不胜感激。

谢谢，曼尼什

最佳答案

这就是我将维基百科综合浏览日志上传到 BigQuery 的方法(它们以空格分隔，且字符串不使用引号):

bq load -F" "
        --quote "" \
        fh-bigquery:wikipedia.pagecounts_20140411_08 \
        pagecounts-20140411-080000.gz
        language,title,requests:integer,content_size:integer

-F"" 表示以空格分隔的文件(根据您的用例使用 '^' 代替)，--quote "" 通知 BigQuery 有关非引用的使用。然后我表示目标表的名称、源文件以及该文件的 5 列。

(维基百科页面浏览量转储可在此处 http://dumps.wikimedia.org/other/pagecounts-raw/ )

关于google-bigquery - bq shell 加载 ^ 分隔的文件，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/24920533/

24

4

0

文章推荐： flutter - 任务 ':path_provider:extractDebugAnnotations' 执行失败

文章推荐： dart - 如何在Dart中取消字符串化(转换为非字符串)？

shell - 从子 shell 退出 shell
我相信我在子 shell 中调用 exit 会导致我的程序继续: #!/bin/bash grep str file | while read line do exit 0 done
shell - 从子 shell 退出 shell
我相信我在子 shell 中调用 exit 会导致我的程序继续: #!/bin/bash grep str file | while read line do exit 0 done
shell - 将变量从一个 shell 脚本导出到另一个 shell 脚本
我有几个脚本，它们的第一部分看起来是一样的。这部分的功能是识别脚本在哪台机器上运行并相应地设置几个变量。它看起来像这样: ENV=`echo $LOGNAME | cut -c1-8` if
shell - 从一个 Shell 脚本运行多个 Shell 脚本
这是我正在尝试做的事情。我有 4 个 shell 脚本。脚本 1 需要先运行，然后是 2，然后是 3，然后是 4，并且它们必须按此顺序运行。脚本 1 需要运行(并在后台等待)2 才能正常运行，但是脚本
shell - 捕获从另一个 shell 脚本调用的 shell 脚本的输出
我有一个名为 a.sh 的脚本，其中的内容是: //a.sh: #!/bin/bash temp=0 while [ "$temp" -ne 500 ] do echo `date`
shell - 使用 shell() 执行多个 shell 命令的推荐方法
在snakemake中，使用shell()函数执行多个命令的推荐方式是什么？最佳答案您可以调用shell()多次内run规则块(规则可以指定 run: 而不是 shell: ): rule pro
shell - 将一个 shell 脚本的所有参数传递给另一个 shell 脚本
我有一个 shell 脚本，我向其中传递了一些参数。Test1.sh -a 1 -b 2 -c“一二三” 在 Test1.sh 中，我按以下方式调用另一个 shell 脚本。Test2.sh $* 我
shell - 我可以从另一个 shell 脚本调用一个 shell 脚本的函数吗？
我有 2 个 shell 脚本。第二个shell脚本包含以下函数第二个.sh func1 func2 first.sh 将使用一些参数调用第二个 shell 脚本，将使用特定于该函数的一些其他参数
shell - 从子 shell 运行 shell 命令
我有一个 Unix shell 脚本 test.sh。在脚本中，我想调用另一个 shell，然后从子 shell 执行 shell 脚本中的其余命令并退出说清楚: test.sh #! /bin/b
shell - 在 shell 脚本中更改父 shell 的路径变量
我想在 shell 脚本中更改路径环境变量。路径变量需要在shell脚本执行后修改。最佳答案我知道有两种方法可以做到这一点。第一种是在当前 shell 的上下文中运行脚本: . myscript.
shell - 管道是否保证在任何 POSIX shell 中创建子 shell？
此 shell 脚本按预期运行。 trap 'echo exit' EXIT foo() { exit } echo begin foo echo end 这是输出。 $ sh foo.sh
shell - vim shell 键映射以执行 shell 命令
我正在使用 vimshell在 vim 中执行命令 nnoremap vs :VimShellPop 使用此键映射，我可以打开 vim shell 并执行诸如“捆绑安装”之类的命令，然后输入 exi
linux - shell 内的 shell 脚本 shell
我想连接到不同的 shell(csh、ksh 等)并在每个切换的 shell 中执行命令。下面是反射(reflect)我的意图的示例程序: #!/bin/bash echo $SHELL csh e
shell - shell 运算符的优先级
我目前正在尝试使用 BNF 和 LL 解析器在 C 中重新编写 shell。否则，我需要知道 shell 运算符的优先级是什么| , > , > , & , ; ? 有没有人可以提供给我？谢谢最
shell - 如何使用脚本暂停后台 shell？
不幸的是，我没有suspend 命令(busybox/ash)。但是我可以使用 kill -STOP $$ 从后台 shell (sh &) 返回到父 shell(以及 fg 之后)。但是我不想输入
shell - SWT - 可靠地知道 shell 用户是否切换到另一个 shell 的事件
我需要知道，当用户切换到另一个 shell 时，通过单击它。我试过 shellListener.shellDeactivated()但是当 shell 失去对它自己的控件的焦点时，会触发此事件，这意
shell - (shell) 如何从一个文件中删除可以在另一个文件中找到的字符串？
file1.txt aaaa bbbb cccc dddd eeee file2.txt DDDD cccc aaaa 结果 bbbb eeee 如果能不区分大小写就更好了! 谢谢! 最佳答案 gre
shell - shell 循环可以解压缩目录中的所有文件吗？
我见过解压缩目录中所有 zip 文件的循环。但是，在运行此之前，我宁愿确保我将要运行的内容正常工作: for i in dir; do cd $i; unzip '*.zip'; rm -rf *.z
shell - shell 文本编辑器如何工作？
我对编程还很陌生，但我想知道 vim、emacs、nano 等 shell 文本编辑器如何能够控制命令行窗口。我主要是一名 Windows 程序员，所以可能在 *nix 上有所不同。据我所知，只能将文
shell - 比较文本文件中的日期| shell
我有一个包含第 7 列日期的文件，我的要求是将它与今天的日期进行比较，如果小于它，则删除该完整行。此外，如果第 7 列中提到的任何日期超过 15 天，则将其修改为最多 15 天下面的例子- now

首页

博学

6Ren·AI

商城

google-bigquery - bq shell 加载 ^ 分隔的文件