php - 从url批量下载文件

Question

我需要从一个 Url 每 0-2.5 MB 批量下载文件到我的服务器(Linux CentOS/也可以是任何其他)。

我想使用 wget(如果您有其他解决方案，请发布):

我的第一种方法是只用一个文件来测试它:

wget -U --load-cookies=cookies.txt "url"

这是 Shell 响应:

问题是它不下载文件，而只下载空的 html。必要的 cookie 以正确的格式保存在文件中，并且可以在浏览器中下载。

如果可以下载 1 个文件，我想使用包含所有 url 的 txt(例如 urls.txt)，其中 url 与上述类似，但只有一个参数发生变化。然后我还希望它一次下载 10-100 个文件。如果您有针对此问题的 PHP 或 Python 解决方案，它也会对我有所帮助。

感谢您的帮助!

Answer 1

我现在已经用 aria2 解决了。它是处理此类事情的绝佳工具。