gpt4 book ai didi

linux - 为什么 wget 挂钟时间比下载时间高得多?

转载 作者:太空宇宙 更新时间:2023-11-04 10:00:32 29 4
gpt4 key购买 nike

<分区>

wget --page-requisites --span-hosts --convert-links --adjust-extension --execute robots=off --user-agent Mozilla --random-wait https://www.invisionapp.com/inside-design/essential-steps-designing-empathy/

上面的命令提供了以下时间统计信息:

Total wall clock time: 35s
Downloaded: 248 files, 39M in 4.2s (9.36 MB/s)

本网站需要大约 5 秒的时间来下载并在浏览器中硬刷新显示所有文件。

为什么挂钟时间比下载时间明显长,有没有办法让它更快?

我希望运行 wget 命令 的时间与浏览器请求文件所需的时间大致相同。如果 total_download_time 表示下载文件所花费的总时间,那么这与浏览器的速度相匹配,这将是理想的,但是,wall_clock - total_download_time = 35s - 4.2s = 30.8s 将累积大小为 39M248 个文件 写入磁盘似乎是一个相当长的时间。我还尝试删除 --convert-links 并将 --no-clobber 添加到 wget 命令并运行 wget_command & wget_command (或终端中的 & wget_commands 与你想要的进程实例一样多)以生成多个进程来并行下载,这将更接近地模拟浏览器请求文件的方式,但没有成功。

29 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com