hadoop - 通过 hive 运行查询时 native snappy 库不可用 : this version of libhadoop was built without snappy support.

Question

java.lang.RuntimeException: native snappy 库不可用:此版本的 libhadoop 是在没有 snappy 支持的情况下构建的。
在 org.apache.hadoop.io.compress.SnappyCodec.checkNativeCodeLoaded(SnappyCodec.java:65)
在 org.apache.hadoop.io.compress.SnappyCodec.getCompressorType(SnappyCodec.java:134)
在 org.apache.hadoop.io.compress.CodecPool.getCompressor(CodecPool.java:150)



我正在使用 hadoop 2.7.3 版本和 hive 2.1.1 版本

Answer 1

我和你有同样的问题，我解决了。

作为错误提示，问题在于构建时不支持 snappy 的 libhadoop.so 库。 hadoop什么时候调用libhadoop.so的public static native boolean buildSupportsSnappy() ，它将返回false。所以，我们得到了错误。

The solution is following BUILDING.txt to build libhadoop.so supporting snappy.

祝你好运。