gpt4 book ai didi

amazon-web-services - AWS S3 同步功能 - 缺少文件

转载 作者:行者123 更新时间:2023-12-04 08:10:40 26 4
gpt4 key购买 nike

我正在将文件从 S3 存储桶传输到 EC2 实例。

使用 AWS CLI,我可以看到有问题的 S3 存储桶中有 219 个文件,总大小约为 43GB

[IN]
aws s3api list-objects --bucket resultsdata --output json --query "[sum(Contents[].Size), length(Contents[])]"

[OUT]

[
43367899797,
219
]

我一直在用 AWS S3 sync command将文件从存储桶传输到 EC2 机器。

当我运行它时,我成功地看到了存储桶中单个文件的下载。然而——它似乎过早地结束了。
Completed 706 of 1550 part(s) with 36 file(s) remaining

当我去下载位置并进行文件计数时
ind /home/ec2-user -type f | wc -l

我得到 198 个文件而不是 219 个。

我多次运行 AWS 同步命令
aws s3 sync s3://MYBUCKETNAME .

我错过了什么?

编辑

我已经排除了 S3 存储桶中的重复

编辑 2

从 ec2 中删除文件并尝试使用 cp -
aws s3 cp s3://mybucket . --recursive

我得到
Completed 4286 of 5084 part(s) with 34 file(s) remaining

但是 - 当我计算文件时,我又得到了一个不同的数字,186。

所以同步给了我 198,cp 给了我 186。两者都缺少 S3 存储桶中的 219 个文件。任何人?!

最佳答案

我的设备上没有剩余空间了!

在这种情况下,我会期望出现错误消息。新安装的卷已解决该问题

关于amazon-web-services - AWS S3 同步功能 - 缺少文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33822807/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com