linux - 如何递归地 curl 所有文件

Question

这是我目前使用的代码:

xargs -n 1 curl -s -o /dev/null -w "%{http_code} - %{url_effective}\n" < 'file.txt'

这适用于 curl file.txt 中的所有 URL 并获取状态代码和 curl 的 URL。但是，我需要对每个文件递归执行此操作。

我尝试了一些方法，比如这样，但都没有用:

xargs -n 1 curl -s -o /dev/null -w "%{http_code} - %{url_effective}\n" < *

多个目录中大约有 3000 个文件。有什么办法可以递归地做到这一点吗？

Answer 1

假设你的文件列表的名字有这样的规则:当前工作目录下的file.txt, file1.txt, file2.txt 包括子目录。

您可以使用 cat **/file*.txt 命令合并这些文件中的所有链接，然后将其与 xargs 合并:

cat **/file*.txt | xargs -n 1 curl -s -o /dev/null -w "%{http_code} - %{url_effective}\n"

祝你好运!