hadoop - HBase数据丢失？缺少 HDFS 追加支持？在没有启用 HDFS 追加支持的情况下运行 HMaster？

Question

我正在使用 HBase。我已经安装并运行了分布式环境。但是在HMaster的接口(interface)页面中显示了警告:

“您当前正在运行 HMaster，但未启用 HDFS 追加支持。这可能会导致数据丢失”我该如何解决这个问题？如果我不用CDH3的hadoop呢？有人可以给我非常详细的说明吗？

谢谢!!!!

Answer 1

正如您刚刚发现的，您不能(不应该)将 Hadoop 0.20.* 的标准 Apache 版本与 HBase 一起使用，因为它缺少附加支持 HDFS-200。没有支持追加的官方 ASF Hadoop 版本。 Cloudera的release是最简单的方法，能不能详细说说为什么不能用？它使用与 Apache 相同的许可证分发，如果您使用 tarball 版本，它类似于 Apache 版本，您不需要特殊许可即可安装 RPM。

我知道的其他选择是从 hadoop-append branch 滚动你自己的 hadoop (不好玩)和使用 MapR，我没有第一手经验。

一段时间以来，在 HBase 邮件列表上，有些人幸运地将 hadoop 安装中的 hadoop jar 替换为随 HBase 一起分发的 hadoop jar。这种方式似乎充满风险，并不是每个人都对此感到满意。