Python 3 可迭代惰性 block 获取

Question

是否有标准方法能够延迟获取下一个数据 block 并按元素生成它

目前我正在获取所有 block 并使用 itertools 将它们链接起来

def list_blobs(container_name:str, prefix:str):    
    chunks = []
    next_marker=None
    while True:
        blobs = blob_service.list_blobs(container_name, prefix=prefix, num_results=100, marker=next_marker)
        next_marker = blobs.next_marker
        chunks.append(blobs)
        if not next_marker:
            break

    return itertools.chain.from_iterable(chunks)

list_blobs fetcher 的“惰性”版本是什么？

Answer 1

将 chunks.append(blob) 替换为 yield from blobs，并去掉 return 和 chunks > 完全列出:

def generate_blobs(container_name:str, prefix:str):
    next_marker = None
    while True:
        blobs = blob_service.list_blobs(container_name, prefix=prefix, num_results=100, marker=next_marker)
        next_marker = blobs.next_marker
        yield from blobs
        if not next_marker:
            break

这会将函数转换为一次生成单个项目的生成器函数。