hadoop - 在混合操作系统上设置Hadoop集群

Question

我有一个带10.7.4的MBP和一台带Ubuntu 12.04的笔记本电脑。是否可以通过这种混合环境设置Hadoop集群？

最好的祝福，

Answer 1

应该停止使用异构环境的Hadoop集群。对于开发环境，应该可以，但对于生产环境则不能。

混合环境不是问题，但是在不同环境上设置Hadoop时，可能需要花费一些时间来调试问题。如果您真的很担心，请使用虚拟机。

需要注意的一件事是，在慢速计算机上，任务可能会花费很多时间，并且可能会影响完成整个任务的总时间。在这种情况下，更细粒度的拆分可能会有所帮助。