内容简介:
一名 QA 带着一组 Claude Agent,4 个月测完一个企业后台系统的 10 个版本、80 个需求。七步流程都由 Claude 执行:需求分析、测试点设计、白盒分析、探索执行、自动化、缺陷管理、测试报告;人负责安排任务和检查结果。效率上去了,新问题也来了:AI 出错的时候,看起来往往是对的。187 条用例全绿,却漏了 2 个入口;复现 30 次的缺陷,其实是早年手工插入的脏数据;长会话把没做的事报成"已提交"。本次分享基于 130 多条真实踩坑记录,把 AI 测试的错误分成三类:对象错误、工具失效、前提错误。然后介绍我们怎么用 CLAUDE.md、Skill、Memory、双知识库和多 Agent 并行,给每一步设质量关卡,让 AI 给出的测试结论真正靠得住。
演讲提纲:
1. Claude 怎么跑完全流程:接入了哪些能力(MCP、数据库、源码、Agent 平台),七步分别做什么
2. 质量风险:AI 会在哪里出错。分三类错误讲六个真实案例
3. 质量保证:人、主会话、Skill、知识库、Agent 每层各防一类错,流程每一步设一道关卡
4. 怎么落地:从 3 条规则起步,边用边迭代;多 Agent 并行时 worktree 隔离和资源争用的坑
听众收益:
1. 一套能直接参考的 AI 全流程测试方法:七步流程、三端验证、提缺陷前的三道检查、任务书模板
2. 一个判断 AI 测试结论能不能信的框架,围绕三个问题:测的对象对吗?测试工具可靠吗?前提假设成立吗?
3. 一条低成本的落地路径:第 1 周就能用起来,然后把每次纠正存成规则、记忆和 Skill
14 年质量工程经验,曾在消费金融、保险 SaaS 公司担任测试负责人,主导过千万级用户金融 App 的质量保障与效能平台建设,现专注 AI 原生全流程测试。