python - 使用Boto3从S3下载文件夹

Question

使用Boto3 Python SDK，我能够使用bucket.download_file()方法下载文件

有没有办法下载整个文件夹？

Answer 1

快速又肮脏，但是可以工作:

import boto3
import os 

def downloadDirectoryFroms3(bucketName, remoteDirectoryName):
    s3_resource = boto3.resource('s3')
    bucket = s3_resource.Bucket(bucketName) 
    for obj in bucket.objects.filter(Prefix = remoteDirectoryName):
        if not os.path.exists(os.path.dirname(obj.key)):
            os.makedirs(os.path.dirname(obj.key))
        bucket.download_file(obj.key, obj.key) # save to same path

假设您要从s3下载目录foo/bar，则for循环将迭代路径以Prefix = foo/bar开头的所有文件。