gpt4 book ai didi

Hive 中的 Unicode 字符

转载 作者:可可西里 更新时间:2023-11-01 14:55:12 28 4
gpt4 key购买 nike

我试图在配置单元中使用 unicode 字符对 unicode 文本进行分组,但 reducer 惨遭失败。 Hive 面临运行时异常。 Hive 是否完全支持 unicode 字符?

Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: Hive Runtime Error while processing row (tag=0) {"key":{"reducesinkkey0":"h�ngekommode","re​​ducesinkkey1":"1 "},"value":{"_col0":"h�ngekommode","_col1":"1 "},"alias":0}

最佳答案

Hadoop 和 Hive 支持 UTF8 编码。这是 Hadoop 和 Hive 代码库中许多地方的隐含假设。您需要将数据转换为 UTF8。

您得到的实际异常是什么?您可以在作业日志中找到它。

关于Hive 中的 Unicode 字符,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/9337162/

28 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com