csv - 将Hive查询导出为CSV

Question

我正在尝试将查询从Hive导出到本地CSV。同样的错误仍然存​​在，任何帮助将不胜感激!
命令:

insert overwrite local directory '/path/to/directory' 
row format delimited fields terminated by ',' select * from table limit 10;

错误:

errorMessage:org.apache.spark.sql.catalyst.parser.ParseException:
`missing 'TABLE' at 'local'

先感谢您。

Answer 1

这就是我在Hive 1.2(MapR发行版)中所做的工作，并且通过2个步骤对我来说非常有效:

步骤1:在配置单元repl中或在命令行中使用hive -e选项时执行:

INSERT OVERWRITE LOCAL DIRECTORY '/path/to/directory/'
          ROW FORMAT DELIMITED
          FIELDS TERMINATED BY ','
          LINES TERMINATED BY '\n'
          STORED AS TEXTFILE
          select * from table1  limit 1000 ;

步骤2:在命令行中，使用 hadoop fs命令将此文件移动到所需目录。

hadoop fs -cat /path/to/directory/*  >  /path/to/directory2/table1_small.csv

或者你甚至可以这样做:

hadoop fs -text /path/to/directory/*  >  /path/to/directory2/table1_small.csv

在上面的示例中，directory和directory2是不同的位置。如果您有任何问题，请告诉我。