linux - 安装 Apache Spot

Question

我需要在 Ubuntu 上安装 Apache Spot。

http://spot.incubator.apache.org/doc/#installation

我已经按照本指南完成了 Hadoop 单节点集群的设置:

https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html

我已经按照 Apache 文档中编写的指南安装了 Hive、Kafka 和 Spark。主要问题是我无法正确配置文件“/spot-setup/spot.conf”，因为当我运行命令时:

./hdfs_setup.sh

终端显示:

sudo: unknown user: hdfs
sudo: unable to initialize policy plugin
./hdfs_setup.sh:line 48:hdfs:command not found
./hdfs_setup.sh:line 52:hdfs:command not found
./hdfs_setup.sh: line 62:impala-shell:command not found

我的/etc/hosts 文件是:

127.0.0.1 localhost
127.0.1.1 osboxes
127.0.0.2 node03
127.0.0.3 node04
127.0.0.4 node16

我应该在 Spot.conf 的行中写入哪些值？非常感谢。

Answer 1

脚本输出暗示 hadoop 未在该节点中正确配置。您可以尝试cloudera quickstart vm，而不是单独安装和配置依赖项。它打包了 Apache Spot 所需的所有依赖项。