linux - 重定向后 Wget 不会递归下载

Question

这是我使用 wget 的方式:

wget --recursive --level=10 --convert-links btlregion.ru

这page重定向到 this .当我像上面那样运行 wget 时，它遵循重定向，但随后只下载该页面 - 而不是递归地下载所有页面。

我已经尝试过 --max-redirects=1 和 --domains=www.btlregion.ru 但它不起作用。

如果我直接在 this page 上调用 wget ，递归下载有效。

Answer 1

您需要将 --span-hosts (-H) 与 --domains 一起使用:

wget --recursive --level=10 --convert-links -H \
--domains=www.btlregion.ru btlregion.ru

--span-hosts 允许 wget 跟踪指向其他域的链接，而 --domains 将此限制为仅跟踪指向的链接列出的域，以避免下载互联网。

--domains 选项与直觉有些相反，仅 与-H 一起工作。文档中提到了这一点，但以一种难以理解的方式。