gpt4 book ai didi

hadoop - 如果我使用 -mapper cat 而不是 -mapper org.apache.hadoop.mapred.lib.IdentityMapper,Hadoop Streaming 的性能会降低吗?

转载 作者:可可西里 更新时间:2023-11-01 16:14:23 27 4
gpt4 key购买 nike

我在尝试使用 org.apache.hadoop.mapred.lib.IdentityMapper 作为 Hadoop Streaming 1.0.3 中 -mapper 的参数时遇到了问题。 “猫”虽然有效;使用 cat 会影响性能——尤其是在 Elastic MapReduce 上吗?

最佳答案

我遇到了类似的问题,其中身份映射器不起作用,我必须使用 Cat

我们没有看到性能上的巨大变化,据我所知,identity mapper 是一个 jar,而 cat 是 unix 命令。

关于hadoop - 如果我使用 -mapper cat 而不是 -mapper org.apache.hadoop.mapred.lib.IdentityMapper,Hadoop Streaming 的性能会降低吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/24940275/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com