gpt4 book ai didi

java.lang.NoClassDefFoundError 与 HBase 扫描

转载 作者:可可西里 更新时间:2023-11-01 14:26:10 27 4
gpt4 key购买 nike

我正在尝试运行 MapReduce 作业来扫描 HBase 表。目前我使用的是 Cloudera 4.4 附带的 HBase 0.94.6 版本。在我的程序中的某个时刻,我使用 Scan(),并正确地导入它:

import org.apache.hadoop.hbase.client.Scan;

它编译得很好,我也可以创建一个 jar 文件。我通过传递 hbase classpath 作为 -cp 选项的值来实现。运行程序时,我收到以下消息:

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/client/Scan

我使用以下代码运行代码:

hadoop jar my_program.jar MyJobClass -libjars <list_of_jars>

其中 list_of_jars 包含/opt/cloudera/parcels/CDH/lib/hbase/hbase.jar。只是为了仔细检查,我确认 hbase.jar 包含 Scan。我这样做:

jar tf /opt/cloudera/parcels/CDH/lib/hbase/hbase.jar

我可以看到这条线:

org/apache/hadoop/hbase/client/Scan.class

在输出中。在我看来一切都很好。我不明白为什么说扫描未定义。我传递了正确的 jar,它包含类。

感谢任何帮助。

最佳答案

设置 HADOOP_CLASSPATH 变量解决了这个问题:

export HADOOP_CLASSPATH=`/usr/bin/hbase classpath`

关于java.lang.NoClassDefFoundError 与 HBase 扫描,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19577680/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com