java - 哪个 Map-Reduce 库和/或平台与 java 一起使用

Question

我最近在阅读和听到一些关于云计算和 map-reduce 技术的东西。我正在考虑使用一些算法来获得该领域的实践经验，看看现在有什么可能。

这是我想做的:
我想使用一些带有内置 map reduce 功能的公共(public)云平台(例如 Google App Engine、Google Map Reduce、Amazon ECS、Amazon Map Reduce)，或者如果它没有内置支持，请使用额外的 map reduce java 库(例如 Hadoop、Hive)，并实现/部署一些算法。

有没有人在该领域取得了一些经验并指出了一个好的起点？或者列举一些在实践中效果很好的组合？

提前致谢!

Answer 1

Amazon EC2 有一些预先捆绑的 Hadoop AMI。见 Running Hadoop on Amazon EC2教程。

特别是 Cloudera想到分布 - 它也带有 Pig 和 Hive。