hadoop - Hadoop中单节点和伪分布式模式有什么区别？

Question

我想知道从配置的角度和理论的角度有什么区别？

这两种模式使用不同的端口号吗？或任何其他区别？

Answer 1

我的 2 美分。

单节点设置(独立设置)

默认情况下，Hadoop 配置为以非分布式或独立模式运行，作为单个 Java 进程。没有守护进程在运行，一切都在单个 JVM 实例中运行。不使用 HDFS。

就配置而言，除了 JAVA_HOME 之外，您无需执行任何操作。只需下载 tarball，解压，就可以开始了。

伪分布式模式

Hadoop 守护进程在本地机器上运行，因此模拟了一个小规模的集群。不同的 Hadoop 守护进程运行在不同的 JVM 实例中，但在一台机器上。使用HDFS代替本地FS。

就伪分布式设置而言，您至少需要设置以下 2 个属性以及 JAVA_HOME:

1. fs.default.name 在 core-site.xml 中。

2. mapred.job.tracker 在 mapred-site.xml 中。

你可以有多个数据节点和任务跟踪器，但这在一台机器上没有多大意义。

HTH