amazon-s3 - 使用 awscli 恢复中断的 s3 下载

Question

我正在使用 awscli 下载文件:

$ aws s3 cp s3://mybucket/myfile myfile

但下载被中断(计算机进入休眠状态)。如何继续下载？ S3 支持 Range header ，但 awscli s3 cp不让我指定它。

该文件不可公开访问，因此我无法使用 curl 手动指定标题。

Answer 1

使用 s3cmd 它有一个内置的 --continue 函数。示例:

# Start a download
> s3cmd get s3://yourbucket/yourfile ./
download: 's3://yourbucket/yourfile' -> './yourfile' [1 of 1]
    123456789 of 987654321     12.5% in 235s   0.5 MB/s

[ctrl-c] interrupt

# Pick up where you left off
> s3cmd --continue get s3://yourbucket/yourfile ./

请注意，S3 cmd 不是多线程的，其中 awscli 是多线程的，例如 awscli 更快。 s3cmd 的 当前维护的 fork ，称为 s4cmd 似乎提供了多线程功能，同时保持了 s3cmd 的可用性特性:
https://github.com/bloomreach/s4cmd