linux - UNIX `time` 命令对于基准测试是否足够准确？

Question

关闭。这个问题是 opinion-based .它目前不接受答案。

---

想要改进这个问题吗？ 更新问题，以便 editing this post 提供事实和引用来回答它.

关闭 3 年前。

Improve this question

假设我想对两个程序进行基准测试:foo.py 和 bar.py。

几千次运行以及 time python foo.py 和 time python bar.py 各自的平均值是否足以分析和比较它们的速度？


编辑:此外，如果每个程序的执行时间都在亚秒以下(假设不是上述情况)，那么 time 仍然可以使用吗？

Answer 1

time 为运行超过一秒的基准测试生成足够好的时间，否则 exec() 进程所花费的时间与其运行时间相比可能会很大。

但是，在进行基准测试时，您应该注意上下文切换。也就是说，另一个进程可能正在使用 CPU，从而与您的基准测试竞争 CPU 并增加其运行时间。为避免与其他进程发生争用，您应该运行如下基准测试:

sudo chrt -f 99 /usr/bin/time --verbose <benchmark>

或者

sudo chrt -f 99 perf stat -ddd <benchmark>

sudo chrt -f 99 在 FIFO 实时类中以优先级 99 运行您的基准测试，这使您的进程成为最高优先级进程并避免上下文切换(您可以更改您的 /etc/security/limits.conf 以便它不需要特权进程来使用实时优先级)。

它还使 time 报告所有可用的统计信息，包括您的基准测试发生的上下文切换次数，通常应该为 0，否则您可能希望重新运行基准测试。

perf stat -ddd 比 /usr/bin/time 提供更多信息，并显示诸如每周期指令、分支和缓存未命中等信息。

最好禁用 CPU 频率缩放和提升，以便 CPU 频率在基准测试期间保持恒定以获得一致的结果。