gpt4 book ai didi

amazon-web-services - 从 S3 IA 中删除 20 亿个对象的最便宜方法

转载 作者:行者123 更新时间:2023-12-04 08:06:25 24 4
gpt4 key购买 nike

我在 S3(不经常访问)中有一个包含 20 亿个对象的存储桶。在控制台中或通过 api 删除而无需花费数年时间,它太大了。
我可以创建生命周期规则来过期和删除对象,但计算器预测这将花费我 > 20,000 美元 .那是正确的吗?有没有更好的方法来删除存储桶?
如果有帮助,我有一个文件有效地包含该存储桶中所有对象的列表。
2021 年更新:
下面来自@MAP 的回答指出现在有一个“空”按钮。我还没有测试过,但看起来像是要走的路(测试后我会接受这个答案):
screenshot of empty button

最佳答案

如果您有所有可用对象的列表,那么您当然可以使用 Multi Delete Object行动。显然是这个 API is free .我会创建 AWS Step Functions state machine to loop通过文件并一次删除 1000 个对象。 1000 似乎是极限。

删除存储桶中的所有对象大约需要 200 万步函数事务。根据 pricing对于步进功能,您将花费大约 50 美元 + cost of Lambda invocations大约 1 美元,所以总成本约为 51 美元。

更新

使用 Lambda 或 Step Functions 可能不是最具成本效益的选择,因为这两种方式都需要从某些源(如 S3)读取文件(包含对象键)。所以我认为从本地机器或任何 EC2 linux 屏幕运行脚本似乎是最好的选择。

关于amazon-web-services - 从 S3 IA 中删除 20 亿个对象的最便宜方法,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/54255990/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com