test-automation-strategy

测试自动化策略

<default_to_action> 设计或改进测试自动化时：

1. 检测反模式：冰淇淋筒？测试套件运行缓慢？测试不稳定？
2. 使用模式：页面对象模型、构建器模式、工厂模式
3. 集成到 CI/CD：每次提交都运行测试，快速失败
4. 管理不稳定的测试：隔离、修复或删除，绝不忽略

快速检测反模式：

• 冰淇淋筒（端到端测试很多，单元测试很少）→ 调整为金字塔结构
• 测试运行缓慢（测试套件耗时 > 10 分钟）→ 并行运行，模拟外部依赖
• 测试不稳定 → 修复时序问题、隔离数据或将其隔离
• 脆弱的选择器 → 使用 data-testid、语义定位器 </default_to_action>

快速参考卡

适用场景

• 构建新的自动化框架
• 提高现有测试的效率
• 减轻不稳定测试带来的负担
• 优化 CI/CD 流水线速度

需要检测的反模式

问题	症状	修复方法
冰淇淋筒	80% 端到端测试，10% 单元测试	调整为金字塔结构
测试套件运行缓慢	CI 耗时 30 分钟以上	并行运行，精简测试
测试不稳定	随机失败	隔离，修复时序问题
测试耦合	依赖执行顺序	隔离数据
脆弱的选择器	CSS 更改后失效	使用 data-testid

---

CI/CD 集成

name: Test Pipeline
on: [push, pull_request]

jobs:
  unit-tests:
    runs-on: ubuntu-latest
    steps:
      - uses: actions/checkout@v4
      - run: npm ci
      - run: npm run test:unit -- --coverage
        timeout-minutes: 5
      - uses: codecov/codecov-action@v3

  integration-tests:
    needs: unit-tests
    runs-on: ubuntu-latest
    services:
      postgres:
        image: postgres:15
    steps:
      - run: npm run test:integration
        timeout-minutes: 10

  e2e-tests:
    needs: integration-tests
    runs-on: ubuntu-latest
    steps:
      - run: npx playwright test
        timeout-minutes: 15

---

不稳定测试管理

// Quarantine flaky tests
describe.skip('Quarantined - INC-123', () => {
  test('flaky test awaiting fix', () => { /* ... */ });
});

// Agent-assisted stabilization
await Task("Fix Flaky Tests", {
  tests: quarantinedTests,
  analysis: ['timing-issues', 'data-isolation', 'race-conditions'],
  strategies: ['add-waits', 'isolate-fixtures', 'mock-externals']
}, "qe-flaky-test-hunter");

---

Agent 辅助自动化

// Generate tests following pyramid
await Task("Generate Test Suite", {
  sourceCode: 'src/',
  pyramid: { unit: 70, integration: 20, e2e: 10 },
  patterns: ['page-object', 'builder', 'factory'],
  framework: 'jest'
}, "qe-test-generator");

// Optimize test execution
await Task("Optimize Suite", {
  algorithm: 'johnson-lindenstrauss',
  targetReduction: 0.3,
  maintainCoverage: 0.95
}, "qe-regression-risk-analyzer");

// Analyze flaky patterns
await Task("Flaky Analysis", {
  testHistory: 'last-30-days',
  detectPatterns: ['timing', 'data', 'environment'],
  recommend: 'stabilization-strategy'
}, "qe-flaky-test-hunter");

---

Agent 协作提示

记忆命名空间

aqe/automation/
├── test-pyramid/*        - Coverage by layer
├── page-objects/*        - Shared page objects
├── flaky-registry/*      - Quarantined tests
└── execution-metrics/*   - Suite performance data

集群协作

const automationFleet = await FleetManager.coordinate({
  strategy: 'test-automation',
  agents: [
    'qe-test-generator',         // Generate pyramid-compliant tests
    'qe-test-executor',          // Parallel execution
    'qe-coverage-analyzer',      // Coverage gaps
    'qe-flaky-test-hunter',      // Flaky detection
    'qe-regression-risk-analyzer' // Smart selection
  ],
  topology: 'hierarchical'
});

---

相关技能

• tdd-london-chicago - 单元测试的 TDD
• api-testing-patterns - 集成模式
• cicd-pipeline-qe-orchestrator - 流水线集成
• shift-left-testing - 尽早开展自动化

---

请记住

使用 Agent： Agent 可生成符合金字塔结构的测试、检测不稳定模式、优化执行时间并维护测试基础设施。使用 Agent 扩展自动化质量。

注意事项

• Agent 生成了 80% 端到端测试和 20% 单元测试（倒金字塔结构）——明确要求遵循 70/20/10 的比例
• 当选择器更改时，页面对象模型测试会变得脆弱——优先使用 data-testid 属性，而不是 CSS 选择器
• 不稳定测试被隔离后却从未修复，会成为技术债务——设置 2 周的 SLA，以便修复或删除
• Agent 将测试代码视为次等代码——测试代码需要遵循与生产代码相同的审查标准
• 并行执行测试需要隔离测试——测试间共享状态会导致非确定性失败