个人中心
文章发布
退出
作者热门文章
- android - RelativeLayout 背景可绘制重叠内容
- android - 如何链接 cpufeatures lib 以获取 native android 库？
- java - OnItemClickListener 不起作用，但 OnLongItemClickListener 在自定义 ListView 中起作用
- java - Android 文件转字符串
26
4
关于 hadoop-minicluster 我需要你的帮助
我正在使用 scala(使用 sbt)并尝试模拟 HDFS 的调用。我播种 hadoop-minicluster 用于部署一个小集群并在其上进行测试。
但是，当我添加 sbt 依赖时:
libraryDependencies += "org.apache.hadoop"% "hadoop-minicluster"% "3.1.0"% 测试
没有添加源，我无法导入包 org.apache.hadoop.hdfs.MiniDFSCluster
你知道我怎么解决这个问题吗？
谢谢你的回答
最佳答案
令人惊讶的是，它不在 hadoop-minicluster 中。尝试libraryDependencies += "org.apache.hadoop"% "hadoop-hdfs"% HADOOP_VERSION 分类器 "tests"
您可能还必须排除一些组件，例如"org.apache.hadoop"% "hadoop-hdfs"% HADOOP_VERSION 分类器 "tests"exclude ("javax.servlet", "servlet-api")
关于Hadoop 迷你集群模拟 (MiniDFSCluster)，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/49895193/
26
4
0
我想测试一下我的代码，唤起org.apache.hadoop.hdfs.MiniDFSCluster类示例。但是，在我举一个例子的时候，我收到一条错误消息，通知我进程不会访问某些文件。我遵循了堆栈跟踪
关于 hadoop-minicluster 我需要你的帮助 我正在使用 scala(使用 sbt)并尝试模拟 HDFS 的调用。我播种 hadoop-minicluster 用于部署一个小集群并在其上
我正在测试中启动 MiniDfsCluster(我的依赖项是 2.0.0-cdh4.5.0)。我使用一个简单的例程来启动它: File baseDir = new File("./target/hdf
我正在尝试在 hadoop 中进行测试。有代码为: System.setProperty("test.build.data","/folder"); 配置=新配置()； cluster = new M
我正在编写一些代码来访问 HBase，我正在编写单元测试以创建一个 MiniDFSCluster 作为测试设置的一部分。 (defn test-config [& options] (let
我正在尝试使用 miniDFSCluster 编写单元测试，但它抛出以下错误 java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio
我正在使用 MiniDFSCluster 进行 junit 测试。现在我只是启动和关闭集群，junit 运行绿色。但我得到这个异常(exception): javax.management.Insta
我想实现一个 Maven 项目，它可以帮助我对 Hadoop MapReduce 作业进行单元测试。我最大的问题是定义 Maven 依赖项以便能够使用测试类:MiniDFSCluster 和 Mini
我在 HDFS 配置中使用 defaultFS 设置。我创建配置，然后显式设置它。 import org.apache.hadoop.conf.Configuration import org
做的时候: new MiniDFSCluster.Builder(config).build() 我得到这个异常: java.lang.UnsatisfiedLinkError: org.apache
我正在尝试启动一个小型 Hadoop 集群以进行单元测试。 我的 Maven 配置具有以下依赖项: org.apache.hbase hbase
我是一名优秀的程序员,十分优秀！