hadoop - HBase 是否稳定且可用于生产？

Question

对于已经在自己的集群上部署了 HBase 的人，您觉得它对于生产使用来说足够稳定吗？您遇到过哪些类型的麻烦或问题？

我确实看到许多公司被列为在生产中使用 HBase (http://wiki.apache.org/hadoop/Hbase/PoweredBy)，但我很好奇是否需要大量维护、修补和演练来保持 HBase 集群的正常运行。

Answer 1

HBase 即将通过 HBase-0.20 达到一个重要的里程碑。有一个 alpha，很快就会成为 RC。它有非常重大的性能改进。据报道，StumbleUpon 为他们的网站提供了 HBase 的主干版本，没有额外的缓存层，其他网站也是如此。所以我想说它绝对可以用于生产。

Ryan Rawson(StumbleUpon 的)给出了 nice talk最近在 nosql session 上讨论了它，主要是关于它在过去 6 个月里取得的进展。如果您不想观看整个内容，可以使用幻灯片。除了性能改进之外，另一个主要新增功能是它现在与 zookeeper 集成，因此 master 不再是单点故障。

由于文件格式的限制，HBase 曾经因内存问题而因小单元格而失败。新的自定义文件格式也解决了这个问题，这也提高了性能。

我已经试验 HBase 大约一年了，我已经准备好信任 0.20 的生产服务，我不太喜欢旧版本。我在试验时推荐至少一个 4 或 5 节点的开发集群。

我无法真正评论照顾生产集群的感觉，因为我们才刚刚开始生产集群。有帮助的一个方面是邮件列表非常活跃，并且 irc 一直在使用，因此至少有一个非常强大的社区可以提供帮助。