python - 使用适当的变量类型将 CSV 文件从 redshift 导出到本地

Question

我正在尝试将表从 redshift 直接导出到我的本地计算机。我成功地从 redshift 获取数据，但是它没有区分任何数据。当我执行 pandas.dtypes 时，它们都作为对象出现，而不是各种数据类型，例如字符串或日期时间戳。我还想直接从导出中添加列标题。

我已经从我的终端使用 PSQL 命令成功导出到我的本地以访问 redshift。

psql -h omaha-prod-cluster.example.us-east-1.redshift.amazonaws.com -d prod -U <username> -p 5439 -A -t -c "select * from l2_survey.survey_customerinsight" -F ',' -o Downloads/survey_customerInsights.csv

然后我运行 panda 命令来读取各种数据类型

data.dtypes()

它返回数据类型为对象的每一列。它也没有用上面的 psql 命令给我列的标题

Answer 1

您的命令有问题，您显式要求export 命令通过提供参数来跳过列名-t，它告诉命令只导出 tuples 而没有 column 名称。只需像下面这样更改它，它就会为您提供 header。

psql -h <host-values>.redshift.amazonaws.com -U <user> -d <database> -p 5439 -c "select * from your_schema.your_table" > out.txt

希望对你有帮助。