hadoop - Cassandra 与 Hadoop 的集成

Question

我是 Cassandra 的新手。我发布这个问题是因为不同的文档提供了关于将 Hive 与 Cassandra 集成的不同细节，我无法找到 github 页面。

我在我的 3 节点 HDP 2.0 集群的其中一个数据节点中安装了单节点 Cassandra 2.0.2(Datastax 社区版)。

我无法使用配置单元通过“org.apache.hadoop.hive.cassandra.cql3.CqlStorageHandler”访问 Cassandra。我从 org.apache.hadoop.hive.ql.exec.DDLTask 收到错误“返回代码 1”。 org.apache.hadoop.hive.ql.metadata.HiveException:加载存储处理程序时出错。org.apache.hadoop.hive.cassandra.cql3.CqlStorageHandler'

我已将/$cassandra_home/lib/* 中的所有 jar 复制到/$hive-home/lib 并将/cassandra_home/lib/* 包含在 $HADOOP_CLASSPATH 中。

为了将 Cassandra 与 Hadoop/Hive 集成，我是否必须进行任何其他配置更改？

请告诉我。感谢您的帮助!

谢谢，阿伦

Answer 1

可能这些是您的起点:

• Hive support for Cassandra, github
• Top level article related to your topic with general information: Hive support for Cassandra CQL3.
• Hadoop support, Cassandra Wiki .

其实你的问题并没有那么狭隘，可能有很多原因。但是您应该记住，Hive 是基于 MapReduce 引擎的。

希望这对您有所帮助。