cpp-testing

SKILL.md

C++ 测试(智能体技能)

针对现代 C++ (C++17/20) 的智能体测试工作流,使用 GoogleTest/GoogleMock 配合 CMake/CTest。

适用场景

  • 编写新的 C++ 测试或修复现有测试
  • 为 C++ 组件设计单元/集成测试覆盖
  • 添加测试覆盖、CI 门禁或回归防护
  • 配置 CMake/CTest 工作流以实现一致性执行
  • 调查测试失败或不稳定(Flaky)行为
  • 启用检测器(Sanitizers)进行内存/竞态诊断

不适用场景

  • 实施不涉及测试更改的新产品功能
  • 与测试覆盖或失败无关的大规模重构
  • 在没有测试回归验证的情况下进行性能调优
  • 非 C++ 项目或非测试任务

核心概念

  • TDD 循环:红(Red)→ 绿(Green)→ 重构(Refactor)(测试先行,最小化修复,然后清理)。
  • 隔离性:优先选择依赖注入和伪造对象(Fakes),而非全局状态。
  • 测试布局tests/unittests/integrationtests/testdata
  • Mocks vs Fakes:Mock 用于交互验证,Fake 用于有状态的行为模拟。
  • CTest 发现:使用 gtest_discover_tests() 进行稳定的测试发现。
  • CI 信号:先运行子集,然后使用 --output-on-failure 运行完整套件。

TDD 工作流

遵循 红 → 绿 → 重构 循环:

  1. 红(RED):编写一个捕获新行为的失败测试。
  2. 绿(GREEN):实施最小化的更改以使测试通过。
  3. 重构(REFACTOR):在保持测试为绿色的前提下进行清理。
// tests/add_test.cpp
#include <gtest/gtest.h>

int Add(int a, int b); // 由生产代码提供。

TEST(AddTest, AddsTwoNumbers) { // 红(RED)
  EXPECT_EQ(Add(2, 3), 5);
}

// src/add.cpp
int Add(int a, int b) { // 绿(GREEN)
  return a + b;
}

// 重构(REFACTOR):一旦测试通过,简化/重命名代码

代码示例

基础单元测试 (gtest)

// tests/calculator_test.cpp
#include <gtest/gtest.h>

int Add(int a, int b); // 由生产代码提供。

TEST(CalculatorTest, AddsTwoNumbers) {
    EXPECT_EQ(Add(2, 3), 5);
}

测试固件 (Fixture) (gtest)

// tests/user_store_test.cpp
// 伪代码存根:请将 UserStore/User 替换为项目实际类型。
#include <gtest/gtest.h>
#include <memory>
#include <optional>
#include <string>

struct User { std::string name; };
class UserStore {
public:
    explicit UserStore(std::string /*path*/) {}
    void Seed(std::initializer_list<User> /*users*/) {}
    std::optional<User> Find(const std::string &/*name*/) { return User{"alice"}; }
};

class UserStoreTest : public ::testing::Test {
protected:
    void SetUp() override {
        store = std::make_unique<UserStore>(":memory:");
        store->Seed({{"alice"}, {"bob"}});
    }

    std::unique_ptr<UserStore> store;
};

TEST_F(UserStoreTest, FindsExistingUser) {
    auto user = store->Find("alice");
    ASSERT_TRUE(user.has_value());
    EXPECT_EQ(user->name, "alice");
}

打桩测试 (Mock) (gmock)

// tests/notifier_test.cpp
#include <gmock/gmock.h>
#include <gtest/gtest.h>
#include <string>

class Notifier {
public:
    virtual ~Notifier() = default;
    virtual void Send(const std::string &message) = 0;
};

class MockNotifier : public Notifier {
public:
    MOCK_METHOD(void, Send, (const std::string &message), (override));
};

class Service {
public:
    explicit Service(Notifier &notifier) : notifier_(notifier) {}
    void Publish(const std::string &message) { notifier_.Send(message); }

private:
    Notifier &notifier_;
};

TEST(ServiceTest, SendsNotifications) {
    MockNotifier notifier;
    Service service(notifier);

    EXPECT_CALL(notifier, Send("hello")).Times(1);
    service.Publish("hello");
}

CMake/CTest 快速入门

# CMakeLists.txt (节选)
cmake_minimum_required(VERSION 3.20)
project(example LANGUAGES CXX)

set(CMAKE_CXX_STANDARD 20)
set(CMAKE_CXX_STANDARD_REQUIRED ON)

include(FetchContent)
# 优先使用项目锁定的版本。如果使用 tag,请根据项目策略使用固定版本。
set(GTEST_VERSION v1.17.0) # 根据项目策略调整。
FetchContent_Declare(
  googletest
  # Google Test 框架 (官方仓库)
  URL https://github.com/google/googletest/archive/refs/tags/${GTEST_VERSION}.zip
)
FetchContent_MakeAvailable(googletest)

add_executable(example_tests
  tests/calculator_test.cpp
  src/calculator.cpp
)
target_link_libraries(example_tests GTest::gtest GTest::gmock GTest::gtest_main)

enable_testing()
include(GoogleTest)
gtest_discover_tests(example_tests)
cmake -S . -B build -DCMAKE_BUILD_TYPE=Debug
cmake --build build -j
ctest --test-dir build --output-on-failure

运行测试

ctest --test-dir build --output-on-failure
ctest --test-dir build -R ClampTest
ctest --test-dir build -R "UserStoreTest.*" --output-on-failure
./build/example_tests --gtest_filter=ClampTest.*
./build/example_tests --gtest_filter=UserStoreTest.FindsExistingUser

调试失败用例

  1. 使用 gtest 过滤器重新运行单个失败的测试。
  2. 在失败的断言周围添加作用域日志(Scoped Logging)。
  3. 启用检测器(Sanitizers)重新运行。
  4. 根本原因修复后,扩展到运行完整套件。

覆盖率 (Coverage)

优先使用目标级(Target-level)设置,而非全局标志。

option(ENABLE_COVERAGE "Enable coverage flags" OFF)

if(ENABLE_COVERAGE)
  if(CMAKE_CXX_COMPILER_ID MATCHES "GNU")
    target_compile_options(example_tests PRIVATE --coverage)
    target_link_options(example_tests PRIVATE --coverage)
  elseif(CMAKE_CXX_COMPILER_ID MATCHES "Clang")
    target_compile_options(example_tests PRIVATE -fprofile-instr-generate -fcoverage-mapping)
    target_link_options(example_tests PRIVATE -fprofile-instr-generate)
  endif()
endif()

GCC + gcov + lcov:

cmake -S . -B build-cov -DENABLE_COVERAGE=ON
cmake --build build-cov -j
ctest --test-dir build-cov
lcov --capture --directory build-cov --output-file coverage.info
lcov --remove coverage.info '/usr/*' --output-file coverage.info
genhtml coverage.info --output-directory coverage

Clang + llvm-cov:

cmake -S . -B build-llvm -DENABLE_COVERAGE=ON -DCMAKE_CXX_COMPILER=clang++
cmake --build build-llvm -j
LLVM_PROFILE_FILE="build-llvm/default.profraw" ctest --test-dir build-llvm
llvm-profdata merge -sparse build-llvm/default.profraw -o build-llvm/default.profdata
llvm-cov report build-llvm/example_tests -instr-profile=build-llvm/default.profdata

检测器 (Sanitizers)

option(ENABLE_ASAN "Enable AddressSanitizer" OFF)
option(ENABLE_UBSAN "Enable UndefinedBehaviorSanitizer" OFF)
option(ENABLE_TSAN "Enable ThreadSanitizer" OFF)

if(ENABLE_ASAN)
  add_compile_options(-fsanitize=address -fno-omit-frame-pointer)
  add_link_options(-fsanitize=address)
endif()
if(ENABLE_UBSAN)
  add_compile_options(-fsanitize=undefined -fno-omit-frame-pointer)
  add_link_options(-fsanitize=undefined)
endif()
if(ENABLE_TSAN)
  add_compile_options(-fsanitize=thread)
  add_link_options(-fsanitize=thread)
endif()

不稳定测试(Flaky Tests)防护准则

  • 永远不要使用 sleep 进行同步;请使用条件变量(Condition Variables)或门闩(Latches)。
  • 确保临时目录在每个测试中都是唯一的,并且始终进行清理。
  • 在单元测试中避免依赖真实时间、网络或文件系统。
  • 为随机输入使用确定性的种子。

最佳实践

建议(DO)

  • 保持测试的确定性和隔离性
  • 优先使用依赖注入而非全局变量
  • 使用 ASSERT_* 检查前提条件,使用 EXPECT_* 进行多重检查
  • 在 CTest 标签或目录中区分单元测试与集成测试
  • 在 CI 中运行检测器以进行内存和竞态检测

禁止(DON'T)

  • 不要在单元测试中依赖真实时间或网络
  • 当可以使用条件变量时,不要使用 sleep 进行同步
  • 不要过度打桩(Mock)简单的值对象(Value Objects)
  • 不要对非关键日志使用脆弱的字符串匹配

常见陷阱

  • 使用固定的临时路径 → 为每个测试生成唯一的临时目录并清理。
  • 依赖墙上时钟时间(Wall clock time) → 注入时钟或使用伪造的时间源。
  • 不稳定的并发测试 → 使用条件变量/门闩和有界等待。
  • 隐藏的全局状态 → 在测试固件中重置全局状态,或移除全局变量。
  • 过度 Mock → 优先对有状态行为使用 Fake,仅对交互使用 Mock。
  • 缺失检测器运行 → 在 CI 中添加 ASan/UBSan/TSan 构建。
  • 仅在 Debug 构建中进行覆盖率统计 → 确保覆盖率目标使用一致的标志。

可选附录:模糊测试 / 属性测试

仅在项目已支持 LLVM/libFuzzer 或属性测试库时使用。

  • libFuzzer:最适合具有极少 I/O 的纯函数。
  • RapidCheck:基于属性的测试,用于验证不变量。

最小化的 libFuzzer 挂钩(伪代码:请替换 ParseConfig):

#include <cstddef>
#include <cstdint>
#include <string>

extern "C" int LLVMFuzzerTestOneInput(const uint8_t *data, size_t size) {
    std::string input(reinterpret_cast<const char *>(data), size);
    // ParseConfig(input); // 项目函数
    return 0;
}

GoogleTest 的替代方案

  • Catch2:仅头文件,具有表现力的匹配器(Matchers)
  • doctest:轻量级,极小的编译开销
Weekly Installs
1
GitHub Stars
125
First Seen
3 days ago
Installed on
mcpjam1
claude-code1
replit1
junie1
windsurf1
zencoder1