个人中心
文章发布
退出
作者热门文章
- android - RelativeLayout 背景可绘制重叠内容
- android - 如何链接 cpufeatures lib 以获取 native android 库？
- java - OnItemClickListener 不起作用，但 OnLongItemClickListener 在自定义 ListView 中起作用
- java - Android 文件转字符串
25
4
我只是想知道 hadoop 中的 copyToLocal 和 copyFromLocal 是如何工作的。他们使用 MapReduce 吗？我想要一个完整的架构 View 。谢谢。
最佳答案
此命令不使用 MapReduce，它们只是递归地将内容从源路径复制到目标路径，使用本地 FS 的 java IO 流和 HDFS 的 hadoop IO 流。
关于hadoop - copyToLocal 和 copyFromLocal 是如何工作的，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/41976693/
25
4
0
Hadoop copyToLocal 正在目标目录中创建 .crc 文件以及实际的数据文件，这对我来说是不必要的，并且会影响我进一步的数据处理。有没有办法避免创建它而不是稍后删除它？ val co
我只是想知道 hadoop 中的 copyToLocal 和 copyFromLocal 是如何工作的。他们使用 MapReduce 吗？我想要一个完整的架构 View 。谢谢。 最佳答案 此命令不使
我正在尝试从 HDFS 复制当我运行它时，什么也没有发生。 hadoop fs -copyToLocal out1 ~/datatemp 我假设我应该为 HDFS 文件包含一个更长的路径？out1 是
有什么方法可以覆盖现有文件，同时使用 HDFS 使用: hadoop fs -copyToLocal 最佳答案 fs -copyFromLocal -f $LOCAL_MOUNT_SRC_PATH
我正在尝试从 .hql 文件执行“copyToLocal”，如下所示: dfs -copyToLocal hdfs://nameservice1/HDFS_FOLDER1/HDFS_FOLDER2/f
我是一名优秀的程序员,十分优秀！