gpt4 book ai didi

hadoop - TEZ 作为工作级别的执行

转载 作者:可可西里 更新时间:2023-11-01 16:51:36 27 4
gpt4 key购买 nike

如何有选择地将TEZ设置为PIG作业的执行引擎?

我们可以在pig.properties中设置执行引擎,但它在集群中会影响集群的所有作业。

最佳答案

如果作业是通过 Templeton 提交的,这是可能的。

PowerShell 用法示例

New-AzureHDInsightPigJobDefinition -Query $QueryString -StatusFolder $statusFolder -Arguments @("-x”, “tez")

CURL 用法示例:

curl -s -d file=<file name> -d arg=-v -d arg=-x -d arg=tez 'https://<dnsname.azurehdinsight.net>/templeton/v1/pig?user.name=admin'

来源:http://blogs.msdn.com/b/tiny_bits/archive/2015/09/19/pig-tez-as-execution-at-job-level.aspx

关于hadoop - TEZ 作为工作级别的执行,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/32662604/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com