gpt4 book ai didi

shell - 将配置单元查询输出写入HDFS文件

转载 作者:行者123 更新时间:2023-12-02 21:09:40 25 4
gpt4 key购买 nike

我已经测试了通过使用hive –e和hive –f选项在shell脚本中执行hive查询将hive查询输出写入文件的能力。当我尝试从腻子执行Shell脚本时,它工作正常,但是在oozie工作流程的色相框中,相同的Shell脚本未将任何结果写入本地文件。

  • 使用插入覆盖目录,我可以直接将配置单元查询输出写入HDFS内的目录,但是对于每个查询,它都会创建一个新目录,因此我不能使用此选项。

  • 请建议我通过oozie工作流程执行shell脚本将多个配置单元查询输出写入单个文件的任何其他选择。

    提前致谢。

    最佳答案

    通过Oozie工作流程运行shell Action 时,它将在任何datanode上运行。检查输出路径在datanode中是否存在

    关于shell - 将配置单元查询输出写入HDFS文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/40671035/

    25 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com