hadoop - 无法使用 Hive 版本 1.1.0 HBase 版本 0.94.8 和 hadoop 版本 2.7.0 从配置单元创建 Hbase 表-6ren

hadoop - 无法使用 Hive 版本 1.1.0 HBase 版本 0.94.8 和 hadoop 版本 2.7.0 从配置单元创建 Hbase 表

转载作者：可可西里更新时间：2023-11-01 16:10:22

无法使用 Hive 版本 1.1.0 HBase 版本 0.94.8 和 hadoop 版本 2.7.0 从 hive 创建 Hbase 表

hive (default)> CREATE TABLE test_hive_hbase(eid int, ename string, esal double) 
              > STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'
              > WITH SERDEPROPERTIES 
              > ("hbase.columns.mapping" = ":key,cfstr:enm,cfsal:esl")
              > TBLPROPERTIES ("hbase.table.name" = "test_hive_hbase");
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org/apache/hadoop/hbase/HBaseConfiguration

我在 hive 下创建了一个 auxlib 文件夹，并添加了来自 hive、hbase 和 hadoop 的所有 jar。

hduser@ubuntu:/usr/lib/hive/auxlib$ ls -latr
total 174536
-rw-r--r--  1 hduser hduser   822524 Oct 19  2011 mysql-connector-java-5.1.16.jar
drwxr-xr-x  5 hduser hduser     4096 May 22  2013 ruby
drwxr-xr-x  3 hduser hduser     4096 May 22  2013 native
-rw-r--r--  1 hduser hduser   779974 May 22  2013 zookeeper-3.4.5.jar1
-rw-r--r--  1 hduser hduser   449505 May 22  2013 velocity-1.7.jar
-rw-r--r--  1 hduser hduser   995720 May 22  2013 snappy-java-1.0.3.2.jar
-rw-r--r--  1 hduser hduser     8601 May 22  2013 slf4j-log4j12-1.4.3.jar
-rw-r--r--  1 hduser hduser    15345 May 22  2013 slf4j-api-1.4.3.jar
-rw-r--r--  1 hduser hduser   132368 May 22  2013 servlet-api-2.5-6.1.14.jar
-rw-r--r--  1 hduser hduser   449818 May 22  2013 protobuf-java-2.4.0a.jar
-rw-r--r--  1 hduser hduser   790250 May 22  2013 netty-3.2.4.Final.jar
-rw-r--r--  1 hduser hduser    82445 May 22  2013 metrics-core-2.1.2.jar
-rw-r--r--  1 hduser hduser   336580 May 22  2013 libthrift-0.8.0.jar1
-rw-r--r--  1 hduser hduser    33015 May 22  2013 jsr305-1.3.9.jar
-rw-r--r--  1 hduser hduser   134910 May 22  2013 jsp-api-2.1-6.1.14.jar
-rw-r--r--  1 hduser hduser  1024680 May 22  2013 jsp-2.1-6.1.14.jar
-rw-r--r--  1 hduser hduser 13312045 May 22  2013 jruby-complete-1.6.5.jar
-rw-r--r--  1 hduser hduser   177131 May 22  2013 jetty-util-6.1.26.jar
-rw-r--r--  1 hduser hduser   539912 May 22  2013 jetty-6.1.26.jar
-rw-r--r--  1 hduser hduser    67758 May 22  2013 jettison-1.1.jar
-rw-r--r--  1 hduser hduser   147933 May 22  2013 jersey-json-1.8.jar
-rw-r--r--  1 hduser hduser   458233 May 22  2013 jersey-core-1.8.jar
-rw-r--r--  1 hduser hduser   890168 May 22  2013 jaxb-impl-2.2.3-1.jar
-rw-r--r--  1 hduser hduser    89967 May 22  2013 jaxb-api-2.1.jar
-rw-r--r--  1 hduser hduser    76844 May 22  2013 jasper-runtime-5.5.23.jar
-rw-r--r--  1 hduser hduser   408133 May 22  2013 jasper-compiler-5.5.23.jar
-rw-r--r--  1 hduser hduser    20642 May 22  2013 jamon-runtime-2.3.1.jar
-rw-r--r--  1 hduser hduser    32353 May 22  2013 jackson-xc-1.8.8.jar
-rw-r--r--  1 hduser hduser   669065 May 22  2013 jackson-mapper-asl-1.8.8.jar
-rw-r--r--  1 hduser hduser    17884 May 22  2013 jackson-jaxrs-1.8.8.jar
-rw-r--r--  1 hduser hduser   227517 May 22  2013 jackson-core-asl-1.8.8.jar
-rw-r--r--  1 hduser hduser   181201 May 22  2013 httpcore-4.1.3.jar
-rw-r--r--  1 hduser hduser   352254 May 22  2013 httpclient-4.1.2.jar
-rw-r--r--  1 hduser hduser    95975 May 22  2013 high-scale-lib-1.1.1.jar
-rw-r--r--  1 hduser hduser  1648200 May 22  2013 guava-11.0.2.jar1
-rw-r--r--  1 hduser hduser  3566844 May 22  2013 core-3.1.1.jar
-rw-r--r--  1 hduser hduser    60686 May 22  2013 commons-logging-1.1.1.jar
-rw-r--r--  1 hduser hduser   279193 May 22  2013 commons-lang-2.5.jar1
-rw-r--r--  1 hduser hduser   163151 May 22  2013 commons-io-2.1.jar
-rw-r--r--  1 hduser hduser   305001 May 22  2013 commons-httpclient-3.1.jar
-rw-r--r--  1 hduser hduser   112341 May 22  2013 commons-el-1.0.jar
-rw-r--r--  1 hduser hduser   168042 May 22  2013 avro-ipc-1.5.3.jar
-rw-r--r--  1 hduser hduser   263268 May 22  2013 avro-1.5.3.jar
-rw-r--r--  1 hduser hduser    15010 May 22  2013 xmlenc-0.52.jar
-rw-r--r--  1 hduser hduser   253205 May 22  2013 junit-4.10-HBASE-1.jar
-rw-r--r--  1 hduser hduser   694352 May 22  2013 jersey-server-1.8.jar
-rw-r--r--  1 hduser hduser  3929148 May 22  2013 hadoop-core-1.0.4.jar1
-rw-r--r--  1 hduser hduser   180792 May 22  2013 commons-net-1.4.1.jar1
-rw-r--r--  1 hduser hduser    43033 May 22  2013 asm-3.1.jar
-rw-rw-r--  1 hduser hduser  4203147 Jul 22  2013 hadoop-core-1.2.1.jar
-rw-r--r--  1 hduser hduser   481535 May 20  2014 log4j-1.2.16.jar1
-rw-r--r--  1 hduser hduser    41123 May 20  2014 commons-cli-1.2.jar
-rw-r--r--  1 hduser hduser   575389 May 20  2014 commons-collections-3.2.1.jar
-rw-r--r--  1 hduser hduser   105112 May 20  2014 servlet-api-2.5.jar
-rw-r--r--  1 hduser hduser   143602 May 20  2014 commons-digester-1.8.jar
-rw-r--r--  1 hduser hduser   188671 May 20  2014 commons-beanutils-1.7.0.jar
-rw-r--r--  1 hduser hduser    65261 May 20  2014 oro-2.0.8.jar
-rw-r--r--  1 hduser hduser   392124 May 20  2014 velocity-1.5.jar
-rw-r--r--  1 hduser hduser    18336 May 20  2014 ant-launcher-1.9.1.jar
-rw-r--r--  1 hduser hduser  1997485 May 20  2014 ant-1.9.1.jar
-rw-r--r--  1 hduser hduser    62050 May 20  2014 commons-logging-1.1.3.jar
-rw-r--r--  1 hduser hduser    58160 May 20  2014 commons-codec-1.4.jar
-rw-r--r--  1 hduser hduser   279781 May 20  2014 commons-httpclient-3.0.1.jar
-rw-r--r--  1 hduser hduser    76643 May 20  2014 hamcrest-core-1.1.jar
-rw-r--r--  1 hduser hduser   433368 May 20  2014 httpclient-4.2.5.jar
-rw-r--r--  1 hduser hduser   227708 May 20  2014 httpcore-4.2.5.jar
-rw-r--r--  1 hduser hduser    26514 May 20  2014 stax-api-1.0.1.jar
-rw-r--r--  1 hduser hduser    62983 May 20  2014 activation-1.1.jar
-rw-r--r--  1 hduser hduser   185140 May 20  2014 commons-io-2.4.jar
-rw-r--r--  1 hduser hduser   298829 May 20  2014 commons-configuration-1.6.jar
-rw-r--r--  1 hduser hduser   206035 May 20  2014 commons-beanutils-core-1.8.0.jar
-rw-r--r--  1 hduser hduser   832410 May 20  2014 commons-math-2.1.jar
-rw-r--r--  1 hduser hduser    29555 May 20  2014 paranamer-2.3.jar
-rw-r--r--  1 hduser hduser   400680 May 20  2014 avro-1.7.5.jar
-rw-r--r--  1 hduser hduser   241367 May 20  2014 commons-compress-1.4.1.jar
-rw-r--r--  1 hduser hduser    94672 May 20  2014 xz-1.0.jar
-rw-r--r--  1 hduser hduser  1251514 May 20  2014 snappy-java-1.0.5.jar
-rw-r--r--  1 hduser hduser   110600 May 20  2014 bonecp-0.8.0.RELEASE.jar
-rw-r--r--  1 hduser hduser   339666 May 20  2014 datanucleus-api-jdo-3.2.6.jar
-rw-r--r--  1 hduser hduser    15071 May 20  2014 jta-1.1.jar
-rw-r--r--  1 hduser hduser   164368 May 20  2014 antlr-runtime-3.4.jar
-rw-r--r--  1 hduser hduser   201124 May 20  2014 jdo-api-3.0.1.jar
-rw-r--r--  1 hduser hduser   148627 May 20  2014 stringtemplate-3.2.1.jar
-rw-r--r--  1 hduser hduser   445288 May 20  2014 antlr-2.7.7.jar
-rw-r--r--  1 hduser hduser  1809447 May 20  2014 datanucleus-rdbms-3.2.9.jar
-rw-r--r--  1 hduser hduser  1890075 May 20  2014 datanucleus-core-3.2.10.jar
-rw-r--r--  1 hduser hduser   236660 May 20  2014 ST4-4.0.4.jar
-rw-r--r--  1 hduser hduser  6377448 May 20  2014 groovy-all-2.1.6.jar
-rw-r--r--  1 hduser hduser    12131 May 20  2014 jpam-1.1.jar
-rw-r--r--  1 hduser hduser    16030 May 20  2014 geronimo-jta_1.1_spec-1.1.1.jar
-rw-r--r--  1 hduser hduser    30548 May 20  2014 geronimo-jaspic_1.0_spec-1.0.jar
-rw-r--r--  1 hduser hduser    12452 May 20  2014 geronimo-annotation_1.0_spec-1.1.1.jar
-rw-r--r--  1 hduser hduser    21879 May 20  2014 asm-tree-3.1.jar
-rw-r--r--  1 hduser hduser    32693 May 20  2014 asm-commons-3.1.jar
-rw-r--r--  1 hduser hduser   447676 May 20  2014 mail-1.4.1.jar
-rw-r--r--  1 hduser hduser  1681148 May 20  2014 jetty-all-7.6.0.v20120127.jar
-rw-r--r--  1 hduser hduser  1683027 May 20  2014 jetty-all-server-7.6.0.v20120127.jar
-rw-r--r--  1 hduser hduser    55953 May 20  2014 tempus-fugit-1.1.jar
-rw-r--r--  1 hduser hduser   250546 May 20  2014 plexus-utils-1.5.6.jar
-rw-r--r--  1 hduser hduser   284220 May 27  2014 commons-lang-2.6.jar
-rw-r--r--  1 hduser hduser   245039 May 31  2014 junit-4.11.jar
-rw-r--r--  1 hduser hduser  2189117 Jul 15  2014 guava-14.0.1.jar
-rw-r--r--  1 hduser hduser    96221 Jul 16  2014 commons-pool-1.5.4.jar
-rw-r--r--  1 hduser hduser   160519 Jul 16  2014 commons-dbcp-1.4.jar
-rw-r--r--  1 hduser hduser    19827 Jul 29  2014 opencsv-2.3.jar
-rw-r--r--  1 hduser hduser    25429 Aug  1  2014 regexp-1.3.jar
-rw-r--r--  1 hduser hduser   792964 Aug 12  2014 zookeeper-3.4.6.jar
-rw-r--r--  1 hduser hduser  1208356 Aug 12  2014 netty-3.7.0.Final.jar
-rw-r--r--  1 hduser hduser    93210 Aug 12  2014 super-csv-2.2.0.jar
-rw-r--r--  1 hduser hduser    69858 Aug 20  2014 maven-scm-provider-svnexe-1.4.jar
-rw-r--r--  1 hduser hduser    40066 Aug 20  2014 maven-scm-provider-svn-commons-1.4.jar
-rw-r--r--  1 hduser hduser    94421 Aug 20  2014 maven-scm-api-1.4.jar
-rw-r--r--  1 hduser hduser    60527 Aug 20  2014 jcommander-1.32.jar
-rw-r--r--  1 hduser hduser   415578 Aug 20  2014 commons-vfs2-2.0.jar
-rw-r--r--  1 hduser hduser   117409 Aug 20  2014 accumulo-trace-1.6.0.jar
-rw-r--r--  1 hduser hduser    57420 Aug 20  2014 accumulo-start-1.6.0.jar
-rw-r--r--  1 hduser hduser   102069 Aug 20  2014 accumulo-fate-1.6.0.jar
-rw-r--r--  1 hduser hduser  4368200 Aug 20  2014 accumulo-core-1.6.0.jar
-rw-r--r--  1 hduser hduser    30359 Sep 17  2014 apache-curator-2.6.0.pom
-rw-r--r--  1 hduser hduser   185245 Sep 17  2014 curator-framework-2.6.0.jar1
-rw-r--r--  1 hduser hduser    68866 Sep 17  2014 curator-client-2.6.0.jar1
-rw-r--r--  1 hduser hduser    30595 Oct  1  2014 commons-compiler-2.7.6.jar
-rw-r--r--  1 hduser hduser   611863 Oct  1  2014 janino-2.7.6.jar
-rw-r--r--  1 hduser hduser    18402 Oct  1  2014 eigenbase-properties-1.1.4.jar
-rw-r--r--  1 hduser hduser    33031 Nov 17  2014 jsr305-3.0.0.jar
-rw-r--r--  1 hduser hduser   227712 Nov 19  2014 libthrift-0.9.2.jar
-rw-r--r--  1 hduser hduser   213854 Nov 19  2014 jline-2.12.jar
-rw-r--r--  1 hduser hduser  2771530 Nov 19  2014 parquet-hadoop-bundle-1.6.0rc3.jar
-rw-r--r--  1 hduser hduser   313686 Nov 19  2014 libfb303-0.9.2.jar
-rw-r--r--  1 hduser hduser  3103132 Nov 19  2014 derby-10.11.1.1.jar
-rw-r--r--  1 hduser hduser   448794 Dec 11  2014 apache-log4j-extras-1.2.17.jar
-rw-r--r--  1 hduser hduser   432351 Feb  1  2015 calcite-linq4j-1.0.0-incubating.jar
-rw-r--r--  1 hduser hduser   216853 Feb  1  2015 calcite-avatica-1.0.0-incubating.jar
-rw-r--r--  1 hduser hduser  3295091 Feb  1  2015 calcite-core-1.0.0-incubating.jar
-rw-r--r--  1 hduser hduser    48557 Feb  1  2015 pentaho-aggdesigner-algorithm-5.1.5-jhyde.jar
-rw-r--r--  1 hduser hduser   108675 Feb 18  2015 hive-shims-common-1.1.0.jar
-rw-r--r--  1 hduser hduser    31656 Feb 18  2015 hive-shims-0.20S-1.1.0.jar
-rw-r--r--  1 hduser hduser    58444 Feb 18  2015 hive-shims-0.23-1.1.0.jar
-rw-r--r--  1 hduser hduser    13074 Feb 18  2015 hive-shims-scheduler-1.1.0.jar
-rw-r--r--  1 hduser hduser     8953 Feb 18  2015 hive-shims-1.1.0.jar
-rw-r--r--  1 hduser hduser   238123 Feb 18  2015 hive-common-1.1.0.jar
-rw-r--r--  1 hduser hduser   809287 Feb 18  2015 hive-serde-1.1.0.jar
-rw-r--r--  1 hduser hduser  5273347 Feb 18  2015 hive-metastore-1.1.0.jar
-rw-r--r--  1 hduser hduser    42296 Feb 18  2015 hive-ant-1.1.0.jar
-rw-r--r--  1 hduser hduser 18438062 Feb 18  2015 hive-exec-1.1.0.jar
-rw-r--r--  1 hduser hduser  1860639 Feb 18  2015 hive-service-1.1.0.jar
-rw-r--r--  1 hduser hduser    93137 Feb 18  2015 hive-jdbc-1.1.0.jar
-rw-r--r--  1 hduser hduser   113184 Feb 18  2015 hive-accumulo-handler-1.1.0.jar
-rw-r--r--  1 hduser hduser    37446 Feb 18  2015 hive-cli-1.1.0.jar
-rw-r--r--  1 hduser hduser   133166 Feb 18  2015 hive-beeline-1.1.0.jar
-rw-r--r--  1 hduser hduser   121456 Feb 18  2015 hive-contrib-1.1.0.jar
-rw-r--r--  1 hduser hduser   115801 Feb 18  2015 hive-hbase-handler-1.1.0.jar
-rw-r--r--  1 hduser hduser    27785 Feb 18  2015 hive-hwi-1.1.0.jar
-rw-r--r--  1 hduser hduser    14527 Feb 18  2015 hive-testutils-1.1.0.jar
-rw-r--r--  1 hduser hduser   539263 Apr 10 11:51 zookeeper-3.4.6-tests.jar
-rw-r--r--  1 hduser hduser   194354 Apr 10 11:51 xml-apis-1.3.04.jar
-rw-r--r--  1 hduser hduser  1229125 Apr 10 11:51 xercesImpl-2.9.1.jar
-rw-r--r--  1 hduser hduser    23346 Apr 10 11:51 stax-api-1.0-2.jar
-rw-r--r--  1 hduser hduser   995968 Apr 10 11:51 snappy-java-1.0.4.1.jar
-rw-r--r--  1 hduser hduser     8866 Apr 10 11:51 slf4j-log4j12-1.7.10.jar
-rw-r--r--  1 hduser hduser    32119 Apr 10 11:51 slf4j-api-1.7.10.jar
-rw-r--r--  1 hduser hduser   533455 Apr 10 11:51 protobuf-java-2.5.0.jar
-rw-r--r--  1 hduser hduser  1779991 Apr 10 11:51 netty-all-4.0.23.Final.jar
-rw-r--r--  1 hduser hduser  1199572 Apr 10 11:51 netty-3.6.2.Final.jar
-rw-r--r--  1 hduser hduser  1419869 Apr 10 11:51 mockito-all-1.8.5.jar
-rw-r--r--  1 hduser hduser    85449 Apr 10 11:51 metrics-core-3.0.1.jar
-rw-r--r--  1 hduser hduser   489884 Apr 10 11:51 log4j-1.2.17.jar
-rw-r--r--  1 hduser hduser  1045744 Apr 10 11:51 leveldbjni-all-1.8.jar
-rw-r--r--  1 hduser hduser   100636 Apr 10 11:51 jsp-api-2.1.jar
-rw-r--r--  1 hduser hduser   185746 Apr 10 11:51 jsch-0.1.42.jar
-rw-r--r--  1 hduser hduser   589289 Apr 10 11:51 joda-time-2.7.jar
-rw-r--r--  1 hduser hduser   539735 Apr 10 11:51 jets3t-0.9.0.jar
-rw-r--r--  1 hduser hduser   713089 Apr 10 11:51 jersey-server-1.9.jar
-rw-r--r--  1 hduser hduser   147952 Apr 10 11:51 jersey-json-1.9.jar
-rw-r--r--  1 hduser hduser    14786 Apr 10 11:51 jersey-guice-1.9.jar
-rw-r--r--  1 hduser hduser   458739 Apr 10 11:51 jersey-core-1.9.jar
-rw-r--r--  1 hduser hduser   130458 Apr 10 11:51 jersey-client-1.9.jar
-rw-r--r--  1 hduser hduser   105134 Apr 10 11:51 jaxb-api-2.2.2.jar
-rw-r--r--  1 hduser hduser    18490 Apr 10 11:51 java-xmlbuilder-0.4.jar
-rw-r--r--  1 hduser hduser     2497 Apr 10 11:51 javax.inject-1.jar
-rw-r--r--  1 hduser hduser    27084 Apr 10 11:51 jackson-xc-1.9.13.jar
-rw-r--r--  1 hduser hduser   780664 Apr 10 11:51 jackson-mapper-asl-1.9.13.jar
-rw-r--r--  1 hduser hduser    18336 Apr 10 11:51 jackson-jaxrs-1.9.13.jar
-rw-r--r--  1 hduser hduser   865838 Apr 10 11:51 jackson-databind-2.2.3.jar
-rw-r--r--  1 hduser hduser   232248 Apr 10 11:51 jackson-core-asl-1.9.13.jar
-rw-r--r--  1 hduser hduser   192699 Apr 10 11:51 jackson-core-2.2.3.jar
-rw-r--r--  1 hduser hduser    33483 Apr 10 11:51 jackson-annotations-2.2.3.jar
-rw-r--r--  1 hduser hduser  1475955 Apr 10 11:51 htrace-core-3.1.0-incubating.jar
-rw-r--r--  1 hduser hduser    45024 Apr 10 11:51 hamcrest-core-1.3.jar
-rw-r--r--  1 hduser hduser    32018 Apr 10 11:51 hadoop-yarn-server-web-proxy-2.7.0.jar
-rw-r--r--  1 hduser hduser    38363 Apr 10 11:51 hadoop-yarn-server-tests-2.7.0.jar
-rw-r--r--  1 hduser hduser    52865 Apr 10 11:51 hadoop-yarn-server-sharedcachemanager-2.7.0.jar
-rw-r--r--  1 hduser hduser  1227925 Apr 10 11:51 hadoop-yarn-server-resourcemanager-2.7.0.jar
-rw-r--r--  1 hduser hduser   686156 Apr 10 11:51 hadoop-yarn-server-nodemanager-2.7.0.jar
-rw-r--r--  1 hduser hduser   360828 Apr 10 11:51 hadoop-yarn-server-common-2.7.0.jar
-rw-r--r--  1 hduser hduser   197128 Apr 10 11:51 hadoop-yarn-server-applicationhistoryservice-2.7.0.jar
-rw-r--r--  1 hduser hduser    97753 Apr 10 11:51 hadoop-yarn-registry-2.7.0.jar
-rw-r--r--  1 hduser hduser  1655209 Apr 10 11:51 hadoop-yarn-common-2.7.0.jar
-rw-r--r--  1 hduser hduser   141988 Apr 10 11:51 hadoop-yarn-client-2.7.0.jar
-rw-r--r--  1 hduser hduser    14038 Apr 10 11:51 hadoop-yarn-applications-unmanaged-am-launcher-2.7.0.jar
-rw-r--r--  1 hduser hduser    46326 Apr 10 11:51 hadoop-yarn-applications-distributedshell-2.7.0.jar
-rw-r--r--  1 hduser hduser  2009286 Apr 10 11:51 hadoop-yarn-api-2.7.0.jar
-rw-r--r--  1 hduser hduser   105874 Apr 10 11:51 hadoop-streaming-2.7.0.jar
-rw-r--r--  1 hduser hduser   115027 Apr 10 11:51 hadoop-sls-2.7.0.jar
-rw-r--r--  1 hduser hduser   281477 Apr 10 11:51 hadoop-rumen-2.7.0.jar
-rw-r--r--  1 hduser hduser   114815 Apr 10 11:51 hadoop-openstack-2.7.0.jar
-rw-r--r--  1 hduser hduser   159466 Apr 10 11:51 hadoop-nfs-2.7.0.jar
-rw-r--r--  1 hduser hduser   273436 Apr 10 11:51 hadoop-mapreduce-examples-2.7.0.jar
-rw-r--r--  1 hduser hduser    44658 Apr 10 11:51 hadoop-mapreduce-client-shuffle-2.7.0.jar
-rw-r--r--  1 hduser hduser  1530257 Apr 10 11:51 hadoop-mapreduce-client-jobclient-2.7.0-tests.jar
-rw-r--r--  1 hduser hduser    37558 Apr 10 11:51 hadoop-mapreduce-client-jobclient-2.7.0.jar
-rw-r--r--  1 hduser hduser     4136 Apr 10 11:51 hadoop-mapreduce-client-hs-plugins-2.7.0.jar
-rw-r--r--  1 hduser hduser   161677 Apr 10 11:51 hadoop-mapreduce-client-hs-2.7.0.jar
-rw-r--r--  1 hduser hduser  1529054 Apr 10 11:51 hadoop-mapreduce-client-core-2.7.0.jar
-rw-r--r--  1 hduser hduser   751807 Apr 10 11:51 hadoop-mapreduce-client-common-2.7.0.jar
-rw-r--r--  1 hduser hduser   510731 Apr 10 11:51 hadoop-mapreduce-client-app-2.7.0.jar
-rw-r--r--  1 hduser hduser   102458 Apr 10 11:51 hadoop-hdfs-nfs-2.7.0.jar
-rw-r--r--  1 hduser hduser  3220975 Apr 10 11:51 hadoop-hdfs-2.7.0-tests.jar
-rw-r--r--  1 hduser hduser  8215724 Apr 10 11:51 hadoop-hdfs-2.7.0.jar
-rw-r--r--  1 hduser hduser   217965 Apr 10 11:51 hadoop-gridmix-2.7.0.jar
-rw-r--r--  1 hduser hduser    64429 Apr 10 11:51 hadoop-extras-2.7.0.jar
-rw-r--r--  1 hduser hduser   102504 Apr 10 11:51 hadoop-distcp-2.7.0.jar
-rw-r--r--  1 hduser hduser    14739 Apr 10 11:51 hadoop-datajoin-2.7.0.jar
-rw-r--r--  1 hduser hduser  1858491 Apr 10 11:51 hadoop-common-2.7.0-tests.jar
-rw-r--r--  1 hduser hduser  3423861 Apr 10 11:51 hadoop-common-2.7.0.jar
-rw-r--r--  1 hduser hduser   134230 Apr 10 11:51 hadoop-azure-2.7.0.jar
-rw-r--r--  1 hduser hduser   102984 Apr 10 11:51 hadoop-aws-2.7.0.jar
-rw-r--r--  1 hduser hduser    70493 Apr 10 11:51 hadoop-auth-2.7.0.jar
-rw-r--r--  1 hduser hduser    21938 Apr 10 11:51 hadoop-archives-2.7.0.jar
-rw-r--r--  1 hduser hduser     9906 Apr 10 11:51 hadoop-ant-2.7.0.jar
-rw-r--r--  1 hduser hduser    17350 Apr 10 11:51 hadoop-annotations-2.7.0.jar
-rw-r--r--  1 hduser hduser    65012 Apr 10 11:51 guice-servlet-3.0.jar
-rw-r--r--  1 hduser hduser   710492 Apr 10 11:51 guice-3.0.jar
-rw-r--r--  1 hduser hduser   190432 Apr 10 11:51 gson-2.2.4.jar
-rw-r--r--  1 hduser hduser   270342 Apr 10 11:51 curator-recipes-2.7.1.jar
-rw-r--r--  1 hduser hduser   186273 Apr 10 11:51 curator-framework-2.7.1.jar
-rw-r--r--  1 hduser hduser    69500 Apr 10 11:51 curator-client-2.7.1.jar
-rw-r--r--  1 hduser hduser   273370 Apr 10 11:51 commons-net-3.1.jar
-rw-r--r--  1 hduser hduser  1599627 Apr 10 11:51 commons-math3-3.1.1.jar
-rw-r--r--  1 hduser hduser   412739 Apr 10 11:51 commons-lang3-3.3.2.jar
-rw-r--r--  1 hduser hduser    24239 Apr 10 11:51 commons-daemon-1.0.13.jar
-rw-r--r--  1 hduser hduser   662947 Apr 10 11:51 azure-storage-2.0.0.jar
-rw-r--r--  1 hduser hduser 11948376 Apr 10 11:51 aws-java-sdk-1.7.4.jar
-rw-r--r--  1 hduser hduser   303139 Apr 10 11:51 avro-1.7.4.jar
-rw-r--r--  1 hduser hduser    43398 Apr 10 11:51 asm-3.2.jar
-rw-r--r--  1 hduser hduser    79912 Apr 10 11:51 api-util-1.0.0-M20.jar
-rw-r--r--  1 hduser hduser    16560 Apr 10 11:51 api-asn1-api-1.0.0-M20.jar
-rw-r--r--  1 hduser hduser   691479 Apr 10 11:51 apacheds-kerberos-codec-2.0.0-M15.jar
-rw-r--r--  1 hduser hduser    44925 Apr 10 11:51 apacheds-i18n-2.0.0-M15.jar
-rw-r--r--  1 hduser hduser     4467 Apr 10 11:51 aopalliance-1.0.jar
-rw-r--r--  1 hduser hduser    67166 May  7 07:28 hadoop-auth-2.6.0.jar1
drwxrwxr-x  6 hduser hduser     4096 May  8 02:54 php
drwxrwxr-x 10 hduser hduser     4096 May  8 02:54 py
drwxrwxr-x 10 hduser hduser     4096 Sep 21 00:33 ..
lrwxrwxrwx  1 hduser hduser       47 Sep 21 00:34 mysql-connector-java-5.1.32.jar -> /usr/share/java/mysql-connector-java-5.1.32.jar
drwxrwxr-x  6 hduser hduser    16384 Sep 21 00:55 .

此外，我还在 hive conf 文件夹中添加了 hadoop 和 hbase conf

hduser@ubuntu:/usr/lib/hive/conf$ ls -ltr
total 1000
-rw-r--r-- 1 hduser hduser     10 May 22  2013 regionservers
-rw-r--r-- 1 hduser hduser   2250 May 22  2013 hbase-policy.xml
-rw-r--r-- 1 hduser hduser   2378 May  3  2014 hive-env.sh.template
-rw-r--r-- 1 hduser hduser   3050 May 20  2014 hive-log4j.properties.template
-rw-r--r-- 1 hduser hduser   2662 May 20  2014 hive-exec-log4j.properties.template
-rw-r--r-- 1 hduser hduser   6316 Feb  2  2015 hbase-env.sh
-rw-r--r-- 1 hduser hduser   1139 Feb 12  2015 beeline-log4j.properties.template
-rw-r--r-- 1 hduser hduser 154793 Feb 18  2015 hive-default.xml.template
-rw-r--r-- 1 hduser hduser   4567 Apr 10 11:51 yarn-env.sh
-rw-r--r-- 1 hduser hduser   2250 Apr 10 11:51 yarn-env.cmd
-rw-r--r-- 1 hduser hduser   2268 Apr 10 11:51 ssl-server.xml.example
-rw-r--r-- 1 hduser hduser   2316 Apr 10 11:51 ssl-client.xml.example
-rw-r--r-- 1 hduser hduser     10 Apr 10 11:51 slaves
-rw-r--r-- 1 hduser hduser    758 Apr 10 11:51 mapred-site.xml.template
-rw-r--r-- 1 hduser hduser   4113 Apr 10 11:51 mapred-queues.xml.template
-rw-r--r-- 1 hduser hduser   1383 Apr 10 11:51 mapred-env.sh
-rw-r--r-- 1 hduser hduser    951 Apr 10 11:51 mapred-env.cmd
-rw-r--r-- 1 hduser hduser  11237 Apr 10 11:51 log4j.properties
-rw-r--r-- 1 hduser hduser   5511 Apr 10 11:51 kms-site.xml
-rw-r--r-- 1 hduser hduser   1631 Apr 10 11:51 kms-log4j.properties
-rw-r--r-- 1 hduser hduser   1527 Apr 10 11:51 kms-env.sh
-rw-r--r-- 1 hduser hduser   3518 Apr 10 11:51 kms-acls.xml
-rw-r--r-- 1 hduser hduser    620 Apr 10 11:51 httpfs-site.xml
-rw-r--r-- 1 hduser hduser     21 Apr 10 11:51 httpfs-signature.secret
-rw-r--r-- 1 hduser hduser   1657 Apr 10 11:51 httpfs-log4j.properties
-rw-r--r-- 1 hduser hduser   1449 Apr 10 11:51 httpfs-env.sh
-rw-r--r-- 1 hduser hduser   9683 Apr 10 11:51 hadoop-policy.xml
-rw-r--r-- 1 hduser hduser   2490 Apr 10 11:51 hadoop-metrics.properties
-rw-r--r-- 1 hduser hduser   2598 Apr 10 11:51 hadoop-metrics2.properties
-rw-r--r-- 1 hduser hduser   3670 Apr 10 11:51 hadoop-env.cmd
-rw-r--r-- 1 hduser hduser    318 Apr 10 11:51 container-executor.cfg
-rw-r--r-- 1 hduser hduser   1335 Apr 10 11:51 configuration.xsl
-rw-r--r-- 1 hduser hduser   4436 Apr 10 11:51 capacity-scheduler.xml
-rw-r--r-- 1 hduser hduser    893 May  7 21:05 yarn-site.xml
-rw-r--r-- 1 hduser hduser    845 May  7 21:07 mapred-site.xml
-rw-r--r-- 1 hduser hduser   1300 May  7 22:57 hdfs-site.xml
-rw-r--r-- 1 hduser hduser 156183 May  8 03:41 hive-default.xml~
-rw-r--r-- 1 hduser hduser 156183 May  8 04:02 hive-default.xml
drwxrwxr-x 5 hduser hduser   4096 May  8 07:10 metastore_db
-rw-rw-r-- 1 hduser hduser    638 May  8 07:10 derby.log
-rw-r--r-- 1 hduser hduser    874 May  9 23:18 core-site.xml
drwxrwxr-x 3 hduser hduser   4096 May 13 00:18 ${system:java.io.tmpdir}
-rw-r--r-- 1 hduser hduser   4837 May 13 00:51 hadoop-env.sh
-rw-r--r-- 1 hduser hduser   3033 May 19 20:47 hive-log4j.properties~
-rw-r--r-- 1 hduser hduser   3035 May 19 20:48 hive-log4j.properties
-rwxr-xr-x 1 hduser hduser   1832 May 20 02:28 hiverc_old
-rw-r--r-- 1 hduser hduser   1629 Sep 20 17:26 hbase-site.xml
-rw-r--r-- 1 hduser hduser   2708 Sep 21 00:33 hive-env.sh~
-rw-r--r-- 1 hduser hduser 158846 Sep 21 00:41 hive-site.xml~
-rw-r--r-- 1 hduser hduser 158844 Sep 21 00:42 hive-site.xml
-rw-r--r-- 1 hduser hduser   2660 Sep 21 00:43 hive-env.sh

我还在 hive_env.sh 文件中指定如下:

export HIVE_AUX_JARS_PATH=/usr/lib/hive/auxlib

#export JAVA_HOME=/usr/lib/jvm/jdk1.8.0/
export JAVA_HOME=/usr/lib/jvm/jdk1.7.0/
export HADOOP_HOME=/usr/local/hadoop
export HIVE_HOME=/usr/lib/hive

export PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HIVE_HOME/bin:$PATH

尝试从配置单元创建 Hbase 表时仍然出现错误。我还缺少什么吗？

最佳答案

我使用的是 Hadoop-2.7、Hive-1.1、HBase-1.0.0使用以下语法:

hbase 外壳

创建“人”、“信息”

put 'people', '100', 'info:name', 'naga'put 'people', '101', 'info:name', 'siva'put 'people', '100', 'info:age',  30put 'people', '101', 'info:age',  35

hive

创建外部表 people(rid string, name string, age int) 存储在'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROPERTIES ("hbase.columns.mapping"= ":key,info:name,info:age", "hbase.table.name"= "people");

hive> select * from people;OK100 naga    30101 siva    35Time taken: 0.115 seconds, Fetched: 2 row(s)

注意:如果它不起作用，请检查 jars 兼容性和任何缺失的 jars。

更新:即使这个也可以正常工作:

创建表 hbase_people(删除字符串，名称字符串，年龄整数) 存储在'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROPERTIES ("hbase.columns.mapping"= ":key,info:name,info:age", "hbase.table.name"= "hbase_people");

好的

耗时:0.48秒

关于hadoop - 无法使用 Hive 版本 1.1.0 HBase 版本 0.94.8 和 hadoop 版本 2.7.0 从配置单元创建 Hbase 表，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/32690166/

文章推荐： http - 主流浏览器支持哪些字符集？

文章推荐： web-services - 解释 REST 完全独立于 HTTP 和 Web 的好例子

文章推荐： java - HTTP 引荐来源网址。可靠吗？

文章推荐： c++ - std::function 在 VS2012 中无法编译

hbase - HBase 什么时候真正删除一行？
发出时Delete对于 hbase，我知道它不会立即删除数据。但是什么时候删除数据，我的意思是，物理上？最佳答案当您向 HBase 写入内容时，它会存储在内存存储 (RAM) 中，然后再写入磁盘。
hbase - HBase 会在不同机器上存储同一行的列族吗？
同一行的列族属于同一个 RegionServer。那么，这里的问题是一个 RegionServer 会在不同的机器上存储不同的列族吗？最佳答案不一定，但在某些时候它会。这是基本 HBase 架构
hbase - hbase 中是否有最大版本号？
如果我想插入表格: row | fam:qualifier | timestamp | value 1 | foo:bar | 12345 | 2 1 | foo:bar | 12346 | 3 1
hbase - 如何停止在 hbase shell 中运行的命令而不退出 hbase shell
有时我想退出我在 HBase shell 中运行的命令，例如扫描操作通常需要太多时间。所以我想停止运行这个命令，但我不想退出 HBase shell。我常用的停止运行命令的方式，我使用了Ctrl+
hbase - Hbase 中的多个数据库或命名空间
有没有办法设置 Hbase 以便我们可以在同一个集群中创建多个数据库？最佳答案只是为了刷新主题:http://hbase.apache.org/book.html#namespace 5.3.1.
hbase - 我使用的是哪个版本的 hbase？
怎么看version的 hbase我在用？你能下命令吗？最佳答案 hbase version命令行界面中的命令给出了 version的 hbase正在使用中。以下是来自 Cloudera 的两个
hbase - HBase 是否对每行施加了最大大小？
高级问题: HBase 是否对所有分布(因此不是实现的工件)通用的每行施加了最大大小，无论是在方面吗？字节存储或在方面细胞数 ? 如果是这样: 限制是什么？极限存在的原因是什么？限制在哪里记
hbase - 将数据仓库星型模式映射到 HBASE
假设，假设我在数据仓库设置中有一个星型模式。有一个非常非常长的事实表(想想几十亿到几万亿行)和几个低基数维度表(想想 100 个维度表)。每个事实表外键指向一个维度表的主键是位图索引的。每个维度表
hbase - 如何确保 HBase Java 客户端正在使用 hbase-site.xml
版本:Hadoop: 2.0.0-cdh4.3.1 HBase: 0.94.6-cdh4.3.1 我正在运行 cloudera quick start vm，这是我的小型远程 HBase Java 客
ubuntu - HBase - 运行 start-hbase.sh 时出现完全分布式 HBase 错误
我正在尝试以完全分布式模式配置 HBase。 (使用 Ubuntu 12.04，Apache Hadoop 2.2(以伪模式运行，HBase 版本 0.98) 以下是我的 bashrc 设置: exp
hbase - hbase-site.xml 中的 hbase.zookeeper.quorum 是什么
我想知道如何正确配置 hbase.zookeeper.quorum 以将 zookeeper 实例指向集群模式。最佳答案 hbase.zookeeper.quorum 属性是运行 ZooKeeper
hbase - hbase-site.xml 中的 hbase.zookeeper.quorum 是什么
我想知道如何正确配置 hbase.zookeeper.quorum 以将 zookeeper 实例指向集群模式。最佳答案 hbase.zookeeper.quorum 属性是运行 ZooKeeper
hadoop - Hbase mapside join-其中一张表没有被读取？从 hbase 中读取正确的结果到 hbase
我正在尝试对位于 Hbase 中的两个表进行映射连接。我的目的是在hashmap中保留小表的记录并与大表进行比较，一旦匹配，再次将记录写入hbase中的表中。我使用 Mapper 和 Reducer
hadoop - HBase ERROR : hbase-default. xml 文件似乎是针对旧版本的 HBase (null)
我正在尝试编写一个程序来连接到 HBase。但是当我执行以下命令时HBaseConfiguration.create();我收到以下错误:. "hbase-default.xml 文件似乎是旧版本的
hbase - 为什么说 HBase 行按字典顺序存储？
基于HBase documentation ，再次遵循 Google BigTable 论文的引用，据说这些行是按行键的字典顺序存储的。很明显，当我们在 rowkey 中有一个字符串或者如果我们将一
hbase - 如何进行 hbase 范围扫描？
我有一个 hbase 表，其中的行键如 row1、row2、row3 .... 和 rowN，我想要的是获取行键从 row100 到 row200 的行，如何编写查询子句或将 hbase 表设计为让查
hbase - 在 HBASE 上创建命名空间
我正在尝试创建命名空间，但出现类似下面给出的错误 hbase(main):031:0> create namespace 'Aniruddha'
hbase - 适用的 HBase 表模型
我发现为以下要求建模 HBase 表有困难。我有一个表“商店”，它存储了商店的详细信息(必胜客)。我有一个表格“订单”，其中包含交易摘要(总交易金额等...)。我有另一个表“Order_Item
hbase - 在不禁用 HBASE 表的情况下更改表结构的含义
谁能告诉我如果在不首先禁用表的情况下使用“alter”命令可能影响表结构的可能影响？据我所知，禁用表意味着关闭与表的所有连接。如果我在不禁用表的情况下使用 alter，可能会发生什么异常情况？我正
hbase - 无法从 HBase 导出表
我无法将表从 HBase 导出到 HDFS。下面是错误跟踪。它是相当大的尺寸。还有其他方法可以导出吗？我使用以下命令导出。我增加了 rpc 超时，但工作仍然失败。 sudo -u hdfs hbas

可可西里

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

hadoop - 无法使用 Hive 版本 1.1.0 HBase 版本 0.94.8 和 hadoop 版本 2.7.0 从配置单元创建 Hbase 表