gpt4 book ai didi

hadoop - Sqoop:--as-parquetfile 不工作

转载 作者:可可西里 更新时间:2023-11-01 16:28:06 27 4
gpt4 key购买 nike

我想将 sqoop 文件作为 parquet 文件直接保存到 hdfs。我正在尝试执行以下命令。但面对 ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.NullPointerException

sqoop 版本 - 1.4.7

sqoop import --options-file /home/user/optionsfile.txt --query "select * from table where \$CONDITIONS" --target-dir 'hdfs:///user/x/sqoop1' --as-parquetfile -m 1;

当我在没有 --as-parquetfile 的情况下尝试相同的 sqoop 命令时,作业执行成功了

最佳答案

由于这是 sqoop 中的一个 Unresolved 错误,我希望您建议首先将数据以文本格式导入到一个临时 hive 表中,然后插入到另一个 parquete 格式的 hive 表中。

关于hadoop - Sqoop:--as-parquetfile 不工作,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52064549/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com