Hadoop:从属节点未启动

Question

我正在尝试在我的机器上设置伪分布式 Hadoop 集群。环境细节:主机操作系统:Windows guest 操作系统:Ubuntu

• Vm's 创建了一个主机和一个从机。
• 我能够在单节点集群上成功运行 hadoop wordcount
• 但是当我尝试添加从属节点时，数据节点、jobtracker、名称节点和辅助名称节点在主节点中正常启动，但从节点中没有数据节点启动。
  • 我能够 ping 从站并使用 ssh 从我的主站登录到从站。
  • /etc/host 文件包含两个虚拟机中的正确条目
  • 我正在使用 NAT 和仅主机适配器为 VM 获取静态 ip

---

主节点 = zenda1

从节点 = Zenda

---

核心站点.xml

<configuration>
<property>
    <name>hadoop.tmp.dir</name>
    <value>/tmp</value>
</property>
<property>
     <name>fs.default.name</name>
     <value>hdfs://zenda1:9000</value>
</property>

ma​​pred-site.xml

 <configuration>
       <property>
               <name>mapred.job.tracker</name>
               <value>zenda1:9001</value>
       </property>
 </configuration>

hdfs-site.xml

  <configuration>
    <property>
      <name>dfs.replication</name>
      <value>2</value>
    </property>
  </configuration>

大师

  zenda1

奴隶

  zenda1
  Zenda

hadoop 文件夹位于我的主节点和从节点中的差异位置(文件夹位置)。

Answer 1

我找到了解决方案:从机中的数据节点无法启动，因为我的主机和从机中的 hadoop home 位置不同。当我将从节点的 hadoop 主页复制到桌面时(那是我的主节点的 hadoop 主页所在的位置)。它开始工作正常。