gpt4 book ai didi

ubuntu - Apache Pig 和 Hadoop Connection 中运行教程脚本的环境设置是什么?

转载 作者:可可西里 更新时间:2023-11-01 14:50:49 27 4
gpt4 key购买 nike

我尝试在 Ubuntu 中运行 pig 教程脚本两天,但是我无法让 pig 连接到 hadoop 文件系统。它仍然在说:“正在连接到 hadoop 文件系统:file:///”

其实hadoop和pig都可以用,我可以用,pig安装下的pig脚本也可以连接hadoop。“连接到 hadoop 文件系统:hdfs://localhost:54310”我的hadoop目录在/home/hadoop/Cluster下,pig安装在/usr/share/pig下,pig教程在home/hadoop/pig下,hadoop安装在/home/someuser/hadoop下。

我几乎尝试了网络上的所有解决方案,但我仍然需要一些帮助。任何想法将不胜感激。

提前致谢。

最佳答案

您必须按以下方式启动 pig:

java -cp /usr/share/pig/pig-0.7.0-core.jar:/home/hadoop/Cluster/conf/ org.apache.pig.Main

其中/home/hadoop/Cluster/conf/为Hadoop配置目录。

顺便说一句,我认为它更容易使用 Cloudera's Distribution for Hadoop而不是自己安装。

关于ubuntu - Apache Pig 和 Hadoop Connection 中运行教程脚本的环境设置是什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/4154183/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com