phpunit - 测试速度非常慢

Question

我在单元测试的世界里越来越深入。

我遇到的一个问题，这是我想要反馈的地方，是当一个人运行多个测试套件时，也许只有我一个人，但我需要使用参数 --process-isolation 让我的测试通过。我可以单独运行我的任何套件而不会出现问题，但是如果我在没有 --process-isolation 的情况下运行，则运行我目前拥有的 6-7 个套件以及它们之间分布的 180 个断言会失败。问题是使用此参数会使测试运行持续 35 分钟，而不是通常的 2.5 分钟。这是一个漫长的等待。

问题与使用模拟的 DI 容器进行特定测试有关，并且当测试套件以链方式运行时，容器未正确重新初始化。在 DI-Container 上设置的静态属性以测试预期的失败会使后续套件中的测试失败。容器有一个参数，可以将包含的对象保存在静态变量中，以便在每次调用时返回相同的实例。一个伪装的单例汉。这在应用程序级别上运行良好，这只是测试的麻烦。

我可以避免使用容器参数并将应用程序编码为不使用静态属性，但为了方法论而避免使用有用的语言结构似乎有点过头了。

也许我做错了什么(我当然希望如此!)但我的印象是，如果想要在每次测试的干净状态下使用 SUT 运行测试，那么使用 --process-isolation 是没有办法的。这使得测试非常耗时，并从中减少了一点乐趣。我在编码时单独运行套件和测试，并在主要提交之前在后台运行套件，从而在某种程度上绕过了这个问题。

我所经历的是否正常，有没有办法解决这个问题？你们那里的测试人员如何确保测试时间是合理的？如何处理静态而不影响测试？

感谢任何见解/评论。

Answer 1

你有几个问题。

首先是进程隔离。通常，它不是必需的，您只想使用它来找出哪个特定测试是致命地破坏您的测试的测试。正如您自己指出的那样，它非常慢，这是您无法解决的。不过，您可能希望禁用备份全局变量，这样每次测试可以节省几毫秒。

导致您的第一个问题的第二个问题是您的代码不可测试，因为在测试期间保留了静态变量 - 我最讨厌的单例问题。您可以通过在依赖容器中提供“清理”或“重置”方法来解决该问题。这些将从您的主测试用例类中的 setUp() 方法中调用，并将所有内容重置为干净状态。

速度

关于测试的运行时间 - 我最近写了一个 blog entry关于找出哪些测试太慢。通常，如果您在保存文件或每次提交后无法运行测试，则测试太慢了。 10秒对我来说几乎不能接受。您拥有的测试越多，运行它们的速度就越慢。

如果您真的有 35 分钟，那么请将您的测试分成合理的组，以便您可以在自己的机器上运行必要的测试 - 仅测试您更改的代码的测试。 Pyrus 是下一代 PEAR 安装程序，具有 automatically detect and run the tests that need to be run 的漂亮功能，取决于您更改了哪些文件。PHPUnit 没有，但你可以手动模拟，phpunit --group .. :)

始终注意模拟 Web 服务和数据库，或者至少使用每个测试所需的数据运行数据库。在验证您是否可以将用户保存到数据库的测试中等待 Web 服务响应 3 秒是您永远不想要的。