amazon-web-services - 如何将非常大的文件上传到 S3？

Question

我有一个大约 100GB 的 postgres 备份，想将它加载到欧盟法兰克福的 S3 并在云数据库中恢复它。

我无权访问 AWS 导入/导出服务。在 Ubuntu 笔记本电脑上

我尝试过的策略

1) management console upload, at least 2 weeks needed
2) bucket explore multi-upload, task failed due to java memory error every time
3) SDK multi-upload(boto, boto3, java SDK), do not show the progress bar. can not estimate how long it needs
4) other windows explore, do not have Linux version

将其加载到 S3 的最快方法是什么？或 python 或 java 中的代码片段。多谢

Answer 1

最简单的解决方案是使用 AWS CLI ( https://aws.amazon.com/de/cli/ )。

aws s3 cp /PATH_TO_BACKUP/BACKUP_FILE s3://BUCKETNAME