gpt4 book ai didi

hadoop - .beeline是否具有与.hiverc相同的目的?

转载 作者:行者123 更新时间:2023-12-02 18:46:30 26 4
gpt4 key购买 nike

我的办公室目前正在从 hive 过渡到 hive 。

我目前有一个.hiverc文件,可以为我加载一些JAR文件,如果可能的话,我想将.hiverc中的所有内容转换为直线。

当前,目录中唯一看起来相关的文件是.beeline(除非我正在寻找.beelinerc,哈哈)。 beeline是否支持.hiverc文件支持的配置单元?

.hiverc内容:

set hive.cli.print.header=true;
set hive.cli.print.current.db=true;
set hive.variable.substitute=true;
set hive.groupby.orderby.position.alias=true;
--set hive.execution.engine=spark;
set hive.execution.engine=mr;
set mapreduce.map.output.compress=true;
set mapreduce.map.output.compress.codec=org.apache.hadoop.io.compress.SnappyCodec;
set hive.exec.compress.intermediate=true;
set hive.exec.compress.output=true;
set hive.auto.convert.join=false;
set mapreduce.map.memory.mb=2048;
set mapreduce.reduce.memory.mb=2048;
set mapreduce.map.java.opts=-Xmx4916m;
set mapreduce.reduce.java.opts=-Xmx4916m;
set mapreduce.task.io.sort.mb=600;
set mapred.reduce.tasks=199;
set hive.exec.dynamic.partition.mode=nonstrict;
set hive.vectorized.execution.enabled=false;
set hive.optimize.sort.dynamic.partition=false;
set hive.optimize.index.filter=false;
set hive.exec.reducers.max=2999;
set hive.exec.orc.default.buffer.size=131072;
set hive.exec.reducers.bytes.per.reducer=64000000;
set hive.exec.orc.default.buffer.size=65536;
set hive.exec.dynamic.partition.mode=nonstrict;
set hive.vectorized.execution.enabled=true;
set hive.optimize.index.filter=false;
set fs.hdfs.impl.disable.cache=false;
--
set mapreduce.job.queuename=Three;
set mapred.job.queue.name=Three;
--add jar hdfs:///user/user_A/esri/spatial-sdk-hadoop.jar;
add jar hdfs:///user/user_A/esri/esri-geometry-api.jar;
add jar hdfs:///user/user_A/esri/spatial-sdk-hive-1.1.1-SNAPSHOT.jar;
add jar hdfs:///user/user_A/esri/spatial-sdk-json-1.1.1-SNAPSHOT.jar;
source /home/user_A/esri/function-ddl.sql;
add jar /home/edpintdatp/jobs/data_ingestion/thirdpartyjars/json-serde-1.3.1.jar;
add jar hdfs:///user/user_A/esri/brickhouse-0.7.1-SNAPSHOT.jar;
source /home/user_A/esri/brickhouse.sql;

最佳答案

根据此Jira Ticket,如果您的Hive版本> 0.14.0,则.hiverc将与beeline一起使用,因为它将与hive-cli一起使用。

关于hadoop - .beeline是否具有与.hiverc相同的目的?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/44678835/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com