hadoop - 方案的ggGas No FileSystem:ggfs

Question

大家
我想在Hadoop 2.4.0中使用GridGain

我的Hadoop配置

core-site.xml

<configuration>

  <property>
    <name>hadoop.tmp.dir</name>
    <value>/usr/hadoop-data</value>
  </property>

  <property>
    <name>fs.trash.interval</name>
    <value>1440</value>
  </property>

  <property>
    <name>io.file.buffer.size</name>
    <value>131072</value>
  </property>

  <property>
    <name>fs.defaultFS</name>
    <value>ggfs://ggfs@R</value>
  </property>

  <property>
    <name>dfs.journalnode.edits.dir</name>
    <value>/usr/hadoop-data/journal</value>
  </property>

  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>r,host002,host004</value>
  </property>

  <property>
    <name>fs.AbstractFileSystem.ggfs.impl</name>
    <value>org.gridgain.grid.ggfs.hadoop.v2.GridGgfsHadoopFileSystem</value>
  </property>

  <property>
    <name>dfs.client.block.write.replace-datanode-on-failure.policy</name>
    <value>NEVER</value>
  </property>

</configuration>

完成设置并启动hdfs

我用

hadoop fs -ls /

ls:方案:ggfs没有文件系统

我应该怎么做

谢谢

Answer 1

将以下内容添加到core-site.xml:

  <property>
    <name>fs.ggfs.impl</name>
    <value>org.gridgain.grid.ggfs.hadoop.v1.GridGgfsHadoopFileSystem</value>
  </property>

很少使用第二版的Hadoop File System API。 Hadoop生态系统的大部分部分都通过第一个API版本工作。

而且，如果您只想使用GGFS，则无需启动HDFS服务。