mapreduce - 您可以获得一个“物理上”本地的 Google Compute Engine 实例集群吗？

Question

Google Compute Engine 可以让您获得一组语义本地的实例，因为只有它们可以相互通信，并且所有外部访问都必须通过防火墙等。如果我愿意运行 Map-Reduce 或其他类型的集群作业会导致高网络流量，那么我还需要物理上本地的机器(例如，在同一机架上)。查看 API 和初始文档，我没有看到任何方法来请求它；还有人知道吗？

Answer 1

GCE 目前不支持指定机架位置。然而，我们构建的系统能够在面对大量以完全连接的方式相互通信的实例时正常工作，只要它们位于同一区域。

这是让 MapR 接近 hadoop terasort 记录的原因之一。您可以在 IO 的 Criag Mcluckie 演讲视频中看到这一点: https://developers.google.com/events/io/sessions/gooio2012/302/

最好的了解方式是测试您的应用程序并了解其工作原理。