gpt4 book ai didi

hadoop - Amazon Streaming Elastic Mapreduce获取输入文件名并设置输出

转载 作者:行者123 更新时间:2023-12-02 21:57:31 26 4
gpt4 key购买 nike

我正在使用亚马逊流媒体功能,是否可以获取文件输入名称?

我还可以设置输出,以便每一行都不是一个新文件吗?

最佳答案

如果这是您的问题,则说明您使用的方式不正确。您的映射器不必关心它正在处理哪个文件。它从整个集合中获取与您的--input参数匹配的数据块,并将其发送到STDIN上的映射器。映射器应处理输入,并输出 \ t * val1 *, val2 ...。然后将它们传递到STDIN上的reducer(之一)。

关于hadoop - Amazon Streaming Elastic Mapreduce获取输入文件名并设置输出,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/10246417/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com