unit-testing - cmocka malloc 测试 OOM 和 gcov

Question

我很难使用 cmocka、测试 malloc 的失败(模拟)和使用 gcov 来找到一个小问题的答案

关于 cmocka+gcov 的更新:我注意到在我的 cmocka 测试中模拟一个函数后，我得到了空的 gcda 文件。为什么？谷歌搜索 cmocka 和 gcov 给出了人们谈论将两者一起使用的结果。似乎大多数人都在使用 CMake，我稍后会看，但应该没有理由(我能想到)要求我使用 cmake。为什么我不能只使用带有 --coverage/-lgcov 标志的 cmocka？

原始问题:

我尝试了无数种组合，主要基于两个主要想法:

我尝试使用 -Wl,--wrap=malloc 来包装对 malloc 的调用。在我的 cmocka 测试中，我尝试使用 will_return(__wrap_malloc, (void*)NULL) 来模拟 malloc 失败。在我的包装函数中，我使用 mock() 来确定我是否应该返回 __real_malloc() 或 NULL。这具有理想的效果，但是我发现 gcov 无法创建 gcda 文件，这是包装 malloc 的部分原因，因此我可以测试 malloc 失败并获得代码覆盖率结果。我觉得我玩过带有符号的肮脏游戏，并且弄乱了从其他编译单元调用的 malloc() 调用(gcov？cmocka？)。

我尝试的另一种方法是对我们 gcc -include 使用 malloc 的 #define 来调用“my malloc”并编译我的目标代码以使用 mymalloc.c(定义“my malloc”)进行测试。因此，#define malloc _mymalloc 帮助我仅调用目标测试代码中的“特殊 malloc”，而在调用它的任何其他地方单独保留 malloc(即，单独保留其他编译单元，以便它们始终调用真正的 malloc)。但是我不知道如何正确使用 will_return() 和 mock() 来检测失败案例与成功案例。如果我测试 malloc() 失败，我得到了我想要的，我基于返回 NULL 的 mock() 从“malloc”返回 NULL——这一切都是在 malloc 的包装函数中完成的，它只在目标代码中调用。但是，如果我想返回真正的 malloc 的结果，那么 cmocka 将失败，因为我没有返回 mock() 的结果。我希望我可以让 cmocka 将 mock() 宏的结果从队列中取出，然后不在乎我没有返回结果，因为我需要 malloc() 的真实结果，这样被测代码才能正常运行。

我觉得应该可以将 malloc 测试与 cmocka 结合起来并获得 gcov 结果。

无论答案是什么，我都想提取以下内容或类似内容。

int business_code()
{
    void* d = malloc(somethingCalculated);
    void* e = malloc(somethingElse);
    if(!d) return someRecovery();
    if(!e) return someOtherRecovery();
    return 0;
}

然后像这样进行 cmocka 测试

cmocka_d_fail()
{
    will_return(malloc, NULL);
    int ret = business_code();
    assert_int_equal(ret, ERROR_CODE_D);
}

cmocka_e_fail()
{
    will_return(malloc, __LINE__); // someway to tell wrapped malloc to give me real memory because the code under test needs it
    will_return(malloc, NULL); // I want "d" malloc to succeed but "e" malloc to fail
    int ret = business_code();
    assert_int_equal(ret, ERROR_CODE_E);
}

我尝试了一些#define/wrap 想法，但最后我要么搞砸了 malloc 并导致 gcov 不吐出我的覆盖数据，要么我没有办法让 cmocka 运行 malloc 案例并返回真实内存，即不从 mock() 调用中返回。一方面，我可以从我的测试驱动程序调用真正的 malloc，然后将其传递给 will_return，但我的 test_code 不知道所需内存的大小，只有被测代码知道。

鉴于时间限制，我不想离开 cmocka 和我当前的测试基础设施。如果我想要的东西不可能实现，我会在未来考虑其他想法。我知道我正在寻找的不是新的，但我正在尝试使用 cmocka/gcov 解决方案。

谢谢

Answer 1

这一切都归结为我弄乱了哪些符号，使用 -lW,--wrap 或巧妙的 #defines。在任何一种情况下，我要么破坏其他调用站点的符号并破坏代码，要么将 cmocka 与不使排队的返回队列混淆。

另外，我的 gcda 文件未正确生成的原因是我尝试使用 -Wl,--wrap=fseek 和 cmocka 的 mock() 把我搞砸了。

fseek/malloc/etc 上的一个聪明的#define 与 mock() 结合用于在您的包装器实现中调用的符号可以在短时间内查询测试套件以查看您是否应该返回一些虚假的东西来导致测试失败或返回真实的结果。有点hacky，但可以解决问题。