hadoop - 如何从 Cassandra 加载数据到 HDFS？

Question

我有一个驻留在 Apache Cassandra 中的数据，我想使用 hadoop 生态系统工具执行 map/reduce 作业。

如何从Cassandra加载数据到HDFS？

除了 Cassandra storage handler/brisk，还有其他存储处理程序吗？

Answer 1

Netflix 推出了一款名为 Aegisthus 的新工具，它试图解决这个问题。

A Bulk Data Pipeline out of Cassandra. Aegisthus implements a reader for the SSTable format and provides a map/reduce program to create a compacted snapshot of the data contained in a column family.

• https://github.com/Netflix/aegisthus
• http://techblog.netflix.com/2012/02/aegisthus-bulk-data-pipeline-out-of.html