web-services - 是否可以批量上传到亚马逊s3？

Question

亚马逊s3支持批量上传吗？我的工作需要每天晚上上传约 100K 个文件，最大可达 1G，但文件严重偏向于小文件(90% 小于 100 字节，99% 小于 1000 字节长)。

s3 API 是否支持在单个 HTTP 调用中上传多个对象？

所有对象必须在 S3 中作为单独的对象可用。我无法将它们托管在其他地方(FTP 等)或以其他格式(数据库、EC2 本地驱动器等)。这是我无法改变的外部要求。

Answer 1

或者，您可以通过 AWS CLI tool 上传 S3使用同步命令。

aws s3 sync local_folder s3://bucket-name

您可以使用此方法非常快速地将文件批量上传到S3。