gpt4 book ai didi

amazon-web-services - 将本地文件放入 Amazon EBS 卷的最快方法是什么?

转载 作者:行者123 更新时间:2023-12-05 05:28:24 26 4
gpt4 key购买 nike

我一直在使用分段上传将 200+GB 的文件导入 S3。然后我必须通过 Web 界面将其下载到 EBS 卷中。还有比这更有效的方法吗?

最佳答案

选项A

使用 AWS Import/Export 服务将文件复制到硬盘驱动器并将物理介质运送到亚马逊可能会更快更容易:

http://aws.amazon.com/importexport/

AWS 随后会将内容复制到您指定的 S3 或 EBS 卷中,并将磁盘寄回给您。

选项 B

这是我推荐测试的另一种方法:

  1. 将文件分成多个部分(例如,使用“split”)

  2. 创建 EBS 卷并附加到正在运行的 EC2 实例(较大以获得高带宽)

  3. 使用压缩 (-z) 与并行运行的多个 rsync 进程同步片段。 重要的是要有多个并行解决延迟问题,否则会减慢传输速度。

  4. 将片段粘贴回目标 EBS 卷上的单个文件(例如,使用“cat”)

关于amazon-web-services - 将本地文件放入 Amazon EBS 卷的最快方法是什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/10939390/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com