linux - 从 EC2 同步到 s3 后如何删除文件

Question

我有一个文件系统，可以将文件放入 EC2 实例中，并且我运行一个 shell 脚本来将新放入的文件同步到 s3 存储桶。一旦文件同步，我希望从 E2C 实例中删除这些文件。具体来说，这些文件被放入“yyyyy”文件夹中。

下面是我的shell代码:

#!/bin/bash

    inotifywait -m -r -e create "yyyyy" | while read -r NEWFILE
    do
            if  lsof  | grep "$NEWFILE" ; then
                    echo "$NEWFILE";
            else
                    sleep 15
                    aws s3 sync yyyyy s3://xxxxxx-xxxxxx/
            fi

Answer 1

您可以使用 aws s3 mv(这是一个“移动”)，而不是使用 aws s3 sync。

这会将文件复制到目标位置，然后删除原始文件(有效地“移动”文件)。

也可以与 --recursive 一起使用来移动整个文件夹，或者 --include 和 --exclude 来指定多个文件.