hadoop - 没有沙盒的 Apache Kylin 安装

Question

我想知道是否有关于 Apache Kylin 安装没有任何沙箱(如 cloudera、hortonworks)支持的任何资源。我已经设法做到了以下几点:

1. 安装 Hadoop 2.6
2. 安装 hive
3. 安装HBase

然后我使用了来自 kylin 站点的二进制文件，到目前为止能够运行它。当我尝试构建一个多维数据集时，问题开始了，map reduce 作业卡在了第 2 步。我在想它是否仍然假设处于沙盒模式并且根本不向 hadoop 提交作业(hadoop jobtracker 中没有条目).

所以我需要关于这两个的解决方案:1. kylin 在纯 hadoop 设置中的可能配置(无沙箱)2. 以某种方式启用 kylin 设置以将作业提交到 hadoop。

Answer 1

Kylin 中没有这样的沙箱或非沙箱配置。只需确保 Kylin 运行的机器正确设置了 hadoop 就可以了。

场景下，kylin.sh使用hbase classpath和hive -e set | grep 'env:CLASSPATH' 检测 hadoop 设置。如果您不确定 Kylin 连接到哪个集群，请仔细检查这些命令是否按预期工作。

如果 Kylin 在提交 MR 作业时遇到问题，请检查两个地方。首先是hadoop resource manager，看job是否真的提交了。有时它只是运行缓慢。其次查看kylin.log，看是否有异常。将日志发布到 kylin dev 邮件列表，有人会提供帮助。