java - 使用 Cucumber 进行多级测试

Question

我的软件有一些 BDD 测试，在 Gherkin 中声明并使用 Cucumber JVM 运行。 Cucumber JVM 测试可以在我的应用程序的多个级别(层)中的任意运行:通过前端(使用 Testcontainers 的 HTML)、通过后端( JSON over HTTP(通过使用 Testcontainers 的 REST API)，通过使用模拟 HTTP 服务器的(使用 Java 方法调用的 Spring Boot 测试)测试工具中的后端，或者(对于某些测试)通过服务层(Java 方法调用) .

但是，我当然想在某种程度上测试我的应用程序的所有这些层。这意味着我想要对我的 BDD 测试进行一些重复。我不想在所有级别上运行所有 BDD 测试。而且我不想只通过前端进行测试，这样更容易调试测试失败。在某些级别上，我只想进行一些关键测试，以表明应用程序的各层已正确粘合在一起。

如果我天真地实现一些重复的 Cucumber JVM 测试，Cucumber 会提示重复的步骤定义。如何进行重复的测试，而不让 Cucumber 因重复的步骤定义而感到困惑？

这是一个与 reusing step definitions 不同的问题:在不同的级别，某个步骤的代码有很大不同。它与 testing variants of and application 不同，其中不同的构建环境使用不同的步骤定义。

Answer 1

为了做到这一点，您必须在多个级别上实现步骤定义。因此，对于应该在一个测试中对 UI 进行操作，而在另一个测试中对 API 进行操作的步骤；您需要 2 个步骤定义。

如果将这些步骤定义分组到不同的文件中，则可以创建指向不同“粘合”类(步骤定义文件”的不同运行程序。

您可以将可在不同级别之间共享的步骤定义分组到一个文件中，供所有运行者使用。

也就是说，我想知道您是否需要在应用程序的多个级别测试相同的内容(即使只是一个子集)？考虑每个测试的值(value)是什么，以及这将如何改变您要验证的内容。例如:如果一种方法在不同的输入上给出不同的输出，则可以在单一测试中进行测试。要测试结果是否正确显示，可能需要在 UI 或 API 级别进行测试。如果 UI 中有关于如何显示的附加逻辑，则可能是 UI 级别的测试。