unit-testing - 组织自动化测试的最佳实践？

Question

我正在为应用程序编写自动化测试，目前有大约 150 个测试用例。一切运行良好，但随着测试不断增加，我不断遇到如何组织测试用例的问题。

一些测试将依赖于以前的测试(例如，在我打开应用程序之前我无法登录，在我登录之前我无法执行操作)。在运行时，我目前有一个 UI，允许用户选择要运行的测试用例，一旦我有了这个列表，就很难对它们进行排序。

我觉得花时间为测试用例预定义顺序是不值得的，因为并非每次都会运行所有测试用例，而且每次添加新测试时我都必须更新此列表。

在自动化测试或一般测试方面有经验的人有什么建议吗？

注意:我尝试为每个测试添加一个整数标志，然后以这种方式对它们进行排序，但这导致了很多问题，并且每当我添加一个发生在中间的新测试时，一些测试都必须移动(这对 150 多个测试用例来说是一个痛苦)。

编辑

我只想澄清另一个可能相互依赖的测试示例，而不仅仅是登录或打开应用程序。对于该软件，用户可以在应用程序中上传数据。然后他们可以去下载该数据的报告。显然，如果用户只选择“下载”测试，我就无能为力了。但是，如果用户选择“上传”和“下载”，我需要一种方法来确保先执行上传。

Answer 1

测试不应该依赖于以前的测试来运行。如果您只想运行“登录”测试而不运行“打开应用程序”测试怎么办？每个测试都应该有自己的设置，它将为测试设置所有内容以自行运行。如果要测试上传，则测试您的应用程序是否成功将文件上传到服务器。如果你想测试下载，首先你在你的测试设置中上传文件到你的服务器，然后测试你的服务器中上传的文件是否可以下载。

测试不应该关心/依赖它们之前发生的事情，否则你的测试可能会失败，不是因为你的代码不起作用，而是因为你的测试不起作用。然后你会浪费时间试图弄清楚为什么你的代码失败了，而实际上是测试失败了。查看 testsetup 和 testclear，每个测试都会设置它需要运行的任何内容，然后一旦完成，它就会自行清除，因此每个测试都清除了其他测试。