python - 使用 Boto 在 S3 中读取文件的一部分

Question

我正在尝试读取存储在 S3 中的 700MB 文件。我怎么只需要从位置 73 到 1024 的字节。

我试图找到一个可用的解决方案，但没有成功。如果有人可以帮助我，那将是一个很大的帮助。

Answer 1

S3 支持 GET requests using the 'Range' HTTP header这就是您所追求的。

要在 boto 中指定范围请求，只需添加一个 header 字典，为您感兴趣的字节指定“范围”键。改编自 Mitchell Garnaat's response :

import boto
s3 = boto.connect_s3()
bucket = s3.lookup('mybucket')
key = bucket.lookup('mykey')
your_bytes = key.get_contents_as_string(headers={'Range' : 'bytes=73-1024'})