📖 导读 当前软件测试行业盛行的“测试思维不可替代”论调，本质上是行业无法向管理层证明自身商业价值而催生的一种集体防御性叙事。领测老贺认为，这是一种危险的认知陷阱，会麻痹软件测试从业者，使其回避真正的职业转型。 领测老贺用“AI测试系统”的假设场景，刺破“测试思维”的神话光环，点明其无法被度量的致命缺陷。接着，通过揭示测试工程师、测试经理、测试培训机构、AI测试工具供应商等各方在“测试思维神化”叙事中的利益关系，构建了一个“集体幻觉”的图景。 随后，回溯历史，类比纺织工、银行柜员被技术替代的过程，指出所有被替代的职…
📖 本文导读 AI质量保障不应局限于传统的"测试左移"（Shift-Left），而必须向外扩展（Shift-Out），构建覆盖全生命周期的"认知缓冲区"。AI系统的输出天然是不确定的，用传统"找Bug"的思维去测试AI，就像用尺子量海水——工具和对象根本不匹配。所以：AI质量保障的核心不是发现缺陷，而是持续构建信任。具体分三步走——用黄金验证集锚定基础正确性，用评分卡对齐团队认知，用信任衰减曲线监控演化风险。三道防线逐层递进，从"点"的校验到"面"的共识再到"线"的持续追踪，最终形成人机之间的认知缓冲区。 一年前，…
导读 测试工程师将自身测试经验和技能封装成企业推行的 Skill（技能资产），看似能通过版税、积分等激励获取短期收益，实则陷入企业精心设计的 “慢性裁员” 陷阱：Skill 的高复用性会让 AI 逐步替代人工测试，企业将 Skill 包装为 “知识资产化”，本质是把测试工程师的工作量化为可削减的成本；Skill 激励背后藏着版税衰减、无成本维护、虚假转型通道三大谎言，工程师失去规则制定、风险决策等核心话语权后，最终会因自己贡献的 Skill 成为企业优化名单上的目标。唯有掌握业务因果链解读权、风险决策否决权、人机协…
AI Agent测试失败越频繁，你的团队越危险 导读 我认识一个测试工程师，姑且叫他老周吧，在一家中型互联网公司干了八年，简历写出来很漂亮——主导过多次架构重构的测试工作，带过团队，经历过项目从零到一。 去年他们公司上了AI测试平台，号称能让测试效率提升十倍。老周一开始很兴奋，觉得终于可以从繁琐的手工用例里解脱出来了。 半年后我问他效果怎么样，他说很好，效率确实高了。 我又问他：那你现在主要做什么？ 他愣了一下，说：审核AI生成的测试用例，看看对不对，然后执行。 我再问他：那些用例，你觉得不对的情况多吗？ 他又愣了…
让智能体具备实用价值的能力，同时也让它们难以评估。适用于多场景部署的评估策略，需结合多种技术，以匹配所测系统的复杂程度。 原文：Demystifying evals for AI agents \ Anthropic 翻译：领测老贺机翻 文章摘要 本文由 Anthropic 工程团队发布，系统拆解了 AI Agent（智能体）评估的核心难点与实践方法。文章解释了为何评估对智能体研发至关重要，介绍了代码型、模型型、人工三类评分器，以及针对编码、对话、研究、计算机操作等不同智能体的评估方案。同时给出了从零搭建评估体系的…
导读： 你的AI测试工具，可能正成为系统中最危险的“安全漏洞”。 每天生成数百个用例，产出绿得发亮的报告，你是否觉得高枕无忧？本文撕开了这层假象：当前盛行的AI测试，本质是“通过率”的合谋者，它擅长复制历史成功路径，却对真正的系统性风险视而不见。当AI只学习如何让测试“通过”，而非学习如何让系统“失败”时，每一次上线都像是在堆积木的顶端再添一块。 老贺将揭示了一个颠覆性的真相：那些将AI用作“红队指挥官”、主动设计极端破坏性测试的团队，才构建了无法被击穿的真实可靠性。如果您的AI测试报告连续三个月零失败，这绝不是庆…
【导读：别让AI测试沦为“数字游戏”】 AI一夜之间能吐出成千上万条测试用例，但面对领导的灵魂拷问——“这些用例到底比人工强在哪？”团队却往往哑口无言。 在本文中，领测老贺将经典软件工程方法论 ODC（正交缺陷分类法） 创造性复用到AI测试场景中。文章拒绝空谈概念，直接给出一套可量化的评估体系：不再单纯追逐用例数量，而是通过 Defect Type（缺陷类型）、Impact（影响程度） 和 Trigger（触发条件） 来精准“称重”AI的发现能力。 无论你是想证明AI测试的业务价值，还是想科学指导Prompt…
📖导读 深夜的 CI 流水线突然崩溃，三百多行报错日志指向无人敢动的老旧自动化脚本；团队里上千行 UI 自动化脚本写完即失效，反而拖慢回归测试节奏；有人死守着 “辛苦写的成果” 不肯删，有人却敢砍掉 60% 冗余脚本，让回归测试从 1 小时缩至 10 分钟…… 你以为自动化测试是提效神器，却为何越做越累、质量越难保障？为何说 “敢删代码” 才是测试工程师的真本事？AI 真能拯救混乱的测试脚本吗？这篇文章戳破 “自动化神话” 的泡沫，拆解测试行业最扎心的真相：真正的测试高手，从来不是脚本的奴隶，而是质量的掌舵人。 测…
