gpt4 book ai didi

hadoop - 获取 Hive 中 Record 的文件名

转载 作者:可可西里 更新时间:2023-11-01 16:26:18 26 4
gpt4 key购买 nike

是否有可能在 Hive 中获取记录的文件名?这对调试非常有帮助。

在我的特殊情况下,我在映射到包含 > 100 个大文件的文件夹的表中有一个不正确的值。使用 grep 是非常低效的

最佳答案

HIVE 支持虚拟列,例如 INPUT__FILE__NAME。它为映射器任务提供输入文件的名称。

查看文档 here .它提供了一些有关如何执行此操作的示例。

不幸的是,我现在无法对其进行测试。让我知道这是否有效。

关于hadoop - 获取 Hive 中 Record 的文件名,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23826262/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com