hadoop - Hive的unbase64()函数的结果在Hive表中是正确的，但在输出文件中变为错误

Question

有两个问题:

我使用unbase64()处理数据，并且输出在Hive和SparkSQL中完全为正确。但是在Presto中，它显示:

然后我将数据插入到本地路径和hdfs中，并且两个输出文件中的数据都错误:

我用来插入数据的代码:

insert overwrite directory '/tmp/ssss'
ROW FORMAT DELIMITED FIELDS TERMINATED BY ','
select * from tmp_ol.aaa;

我的问题是:
1.为什么在 hive和 SparkSQL以及 Presto中都能正确显示处理后的数据？我机器上的Presto可以显示这种字符。

为什么数据无法在输出文件中正确显示？这些文件为utf-8格式。

Answer 1

您可以尝试在unbase64()函数的输出上使用CAST(AS STRING)。

spark.sql("""Select CAST(unbase64('UsImF1dGhvcml6ZWRSZXNvdXJjZXMiOlt7Im5h') AS STRING) AS values FROM dual""").show(false)```