postgresql - 如何将 Parquet 文件从 s3 导入 postgresql rds

Question

我正在尝试将 Parquet 文件从 s3 加载到 AWS postgresql RDS。使用 aws_s3.table_import_from_s3 的数据导入对于 csv 文件工作正常，但是当我尝试对 Parquet 文件使用类似的方法时，出现以下错误:

ERROR: invalid byte sequence for encoding "UTF8": 0x00

在 AWS 文档中，我看到了自定义分隔符或 zip 文件的选项。是否可以导入 Parquet 数据？

Answer 1

数据导入 AWS PostgreSQL RDS 支持什么 COPY做。尽管有 PostgreSQL 二进制文件格式，但它不支持 Parquet，因此为了导入数据，您必须先将其转换为文本文件或 PostgreSQL 二进制文件格式。