python - 运行自动发现的 python 单元测试的子集

Question

小问题
在 Python 的单元测试模块中使用自动发现方法时，是否可以在运行时选择要运行的单元测试。

背景
我正在使用 unittest 模块在外部系统上运行系统测试。请参阅下面的示例 sudo-testcase。单元测试模块允许我创建任意数量的测试用例，我可以使用单元测试的测试运行器运行这些测试用例。我一直在使用这种方法大约 6 个月，而且效果很好。非常。

此时此刻，我想尝试让它变得更加通用和用户友好。对于我现在正在运行的所有测试套件，我已经硬编码了必须为每个系统运行哪些测试。这对于未经测试的系统来说很好，但是当测试错误地失败时(用户连接到错误的测试点等...)，他们必须重新运行整个测试套件。由于一些完整的套件可能需要长达 20 分钟，因此这远非理想。

我知道可以创建自定义 测试套件构建器来定义要运行的测试。我的问题是，有数百个测试用例可以运行，如果测试用例名称更改等，维护这将是一场噩梦......

我希望使用 nose ，或内置的 unittest模块来实现这一点。对于这两个选项，发现部分似乎都非常简单，但我的问题是，选择要运行的测试用例子集的唯一方法是定义一个存在于测试用例名称中的模式。这意味着我仍然需要硬编码一个模式列表来定义要运行的测试用例。因此，如果我必须对这个列表进行硬编码，那么使用自动发现有什么意义(请注意这是反问句)？

我的最终目标是有一个通用的方法来选择在执行期间运行哪些单元测试，以复选框或用户可以编辑的文本字段的形式。理想情况下，该解决方案将使用 Python 2.7，并且需要在 Windows、OSX 和 Linux 上运行。

编辑
为了帮助澄清，我不希望该工具生成选项列表或复选框。理想情况下，该工具会返回目录中所有测试的列表，包括完整路径和测试用例所属的套件(如果有)。使用此列表，我将构建用户与之交互的复选框或组合框，并将这些测试即时传递到测试套件中以运行。

示例测试用例

test_measure_5v_reference 
    1) Connect to DC power supply via GPIB
    2) Set DC voltage to 12.0 V
    3) Connect to a Digital Multimeter via GPIB
    4) Measure / Record the voltage at a given 5V reference test point
    5) Use unittest's assert functions to make sure the value is within tolerance

Answer 1

将每个测试子集存储在其自己的模块中。如您所述，通过让用户使用复选框或文本输入来选择它们来获取模块名称列表。获得模块名称列表后，您可以构建相应的测试套件，执行与以下类似的操作。

testsuite = unittest.TestSuite()
for module in modules:
  testsuite.addTest(unittest.defaultTestLoader.loadTestsFromModule(module))