gpt4 book ai didi

web-services - 是否可以批量上传到亚马逊s3?

转载 作者:行者123 更新时间:2023-12-03 05:44:34 25 4
gpt4 key购买 nike

亚马逊s3支持批量上传吗?我的工作需要每天晚上上传约 100K 个文件,最大可达 1G,但文件严重偏向于小文件(90% 小于 100 字节,99% 小于 1000 字节长)。

s3 API 是否支持在单个 HTTP 调用中上传多个对象?

所有对象必须在 S3 中作为单独的对象可用。我无法将它们托管在其他地方(FTP 等)或以其他格式(数据库、EC2 本地驱动器等)。这是我无法改变的外部要求。

最佳答案

或者,您可以通过 AWS CLI tool 上传 S3使用同步命令。

aws s3 sync local_folder s3://bucket-name

您可以使用此方法非常快速地将文件批量上传到S3。

关于web-services - 是否可以批量上传到亚马逊s3?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/15050146/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com