linux - Hadoop NFS挂载问题

Question

我正在尝试将 Windows Server 2012 中的 NFS 共享挂载到我的 Hadoop 集群(运行 Hadoop 2.7.3)，以便它可以对上传到 Windows Server 的文件运行 MapReduce。 Hadoop 集群在树莓派 2(其中 8 个)上运行，我已经完成了 Hadoop 上的配置 wiki

我已经尝试将 NFS 挂载到主服务器上的 HDFS 目录 (/hdfs/tmp/datanode)，但在名称节点上无法访问它。

我是不是安装错了地方？

Answer 1

没关系，我已经改变了我的解决方案，将 NFS 挂载到名称节点上，并且 crontab 脚本根据需要将文件放到 hdfs 上

#! /bin/bash
inotifywait -mr -e create --format '%w%f' /hdfs-nfs/* | while read NEWFILE; do
    echo "${NEWFILE} detected"
    hadoop fs -put "${NEWFILE}" /
done