gpt4 book ai didi

hadoop - 通过分布式缓存访问Pig中的文件

转载 作者:行者123 更新时间:2023-12-02 19:51:23 27 4
gpt4 key购买 nike

关于这一点,我在Stackoverflow上浏览了很多页面。但是我还是很困惑。即使这是一个重复的问题或类似的问题,也请回答

我想将一个文件与Pig中的另一个文件进行比较,并且我希望其中一个文件位于分布式缓存中,以便每个映射器都可以在本地对其进行存储。如何在Pig中实现它。

最佳答案

使用以下

set mapred.cache.files /new_file_location/new_file.txt#new_file.txt

运送到每个映射器运行的位置。

关于hadoop - 通过分布式缓存访问Pig中的文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/21911043/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com