gpt4 book ai didi

amazon-redshift - 如何将拆分的 gzip 文件中的数据加载到 redshift?

转载 作者:行者123 更新时间:2023-12-01 15:43:09 24 4
gpt4 key购买 nike

我可以将拆分的 gzip 文件中的数据加载到 amazon redshift 表中吗?

我可以从单个 gzip 文件或拆分的文本文件中加载数据。

但是我可以从拆分的 gzip 文件中加载数据吗?

最佳答案

我在这里假设您的意思是您有多个 CSV 文件,每个文件都经过 gzip 压缩。

首先,将每个文件上传到具有相同前缀和分隔符的 S3 存储桶。
s3://S3_BUCKET/S3_PREFIX/file0.gzs3://S3_BUCKET/S3_PREFIX/file1.gz
然后,执行 Redshift copy命令:
copy TABLE_NAME from 's3://S3_BUCKET/S3_PREFIX' credentials 'aws_access_key_id=ACCESS_KEY;aws_secret_access_key=SECRET_KEY' csv gzip

  • 指定 S3 存储桶和前缀
  • 包括有权读取 S3 对象的凭据
  • 确保目标表已经存在并且具有与 CSV 兼容的列
  • 指定 csv 和 gzip 选项

  • Also, it's a good idea to have your file count proportional to the number of nodes in your cluster.

    关于amazon-redshift - 如何将拆分的 gzip 文件中的数据加载到 redshift?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33266117/

    24 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com