gpt4 book ai didi

google-cloud-storage - 返回文件的限制

转载 作者:行者123 更新时间:2023-12-02 15:38:43 25 4
gpt4 key购买 nike

我需要在谷歌云存储中保存几千个文件。 gsutil ls 命令返回的文件数量是否有限制?

如果我没记错的话,AWS S3 服务的限制是每个请求只能显示几千个条目。如果我需要列出下一批,我需要使用 API 或使用一些复杂的脚本。

我想知道在使用 gsutil 命令行工具时是否有这样的限制。我可以自己检查,但我将不得不上传数千个虚拟文件!

最佳答案

gsutil ls 命令对存储桶列表进行分页 - 每个底层 GET 返回有限数量的结果(通常为 1000),并且 gsutil 将继续迭代所有批处理,直到它列出存储桶中的所有对象。

请注意,如果您计划构建大量对象(例如,数十万或数百万),我们建议您不要依赖使用桶列表来跟踪您的对象,而是维护您的自己的元数据(例如,在列出所有对象名称和相关详细信息的数据库中)。

迈克·施瓦茨,Google 云存储团队

关于google-cloud-storage - 返回文件的限制,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12551171/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com