- 本文以企业支付SDK退款接入为案例,揭示Coding Agent在知识、工具、环境与评测四方面的系统性缺口,提出基于真值包、受控沙箱与行为轨迹的补丁验收闭环,强调“可验证的正确”而非“能跑即合格”。 本文以企业支付SDK退款接入为案例,揭示Coding Agent在知识、工具、环境与评测四方面的系统性缺口,提出基于真值包、受控沙箱与行为轨迹的补丁验收闭环,强调“可验证的正确”而非“能跑即合格”。
- 上个月,团队里一个测试同学来找我,表情有点无奈。“哥,我用 Claude Code 生成接口测试用例,写了三天 Prompt,生成的脚本还是只能跑正常流程。让它测密码错误,它只断言 HTTP 200,根本没查数据库里的登录状态。”我问他:“你把测试规则写在哪了?”他说:“写在对话里啊。每次都要重新说一遍‘先调登录接口拿 token,再调业务接口,断言 code=0,data 不能为空’……”... 上个月,团队里一个测试同学来找我,表情有点无奈。“哥,我用 Claude Code 生成接口测试用例,写了三天 Prompt,生成的脚本还是只能跑正常流程。让它测密码错误,它只断言 HTTP 200,根本没查数据库里的登录状态。”我问他:“你把测试规则写在哪了?”他说:“写在对话里啊。每次都要重新说一遍‘先调登录接口拿 token,再调业务接口,断言 code=0,data 不能为空’……”...
- 导读Anthropic 在新版使用政策中禁止用户持续、无必要地虐待 Claude。相关机制并非首次出现:2025 年,Claude 就已能在极少数恶意互动中主动结束对话。随着 AI 从聊天助手转向执行复杂任务的 Agent,这次更新也带出了一个工程问题:系统何时可以中止交互,如何避免误判,又怎样处理被中断的任务?写代码的时候,Claude Code 连续几次改错,你忍不住骂一句:“这都改不... 导读Anthropic 在新版使用政策中禁止用户持续、无必要地虐待 Claude。相关机制并非首次出现:2025 年,Claude 就已能在极少数恶意互动中主动结束对话。随着 AI 从聊天助手转向执行复杂任务的 Agent,这次更新也带出了一个工程问题:系统何时可以中止交互,如何避免误判,又怎样处理被中断的任务?写代码的时候,Claude Code 连续几次改错,你忍不住骂一句:“这都改不...
- UI智能遍历测试是一种基于状态识别、路径探索与动态反馈的自动化测试方法,解决传统Monkey测试覆盖不均、重复无效操作等问题。通过构建UI状态图、智能去重、覆盖驱动路径规划及多维度异常检测,显著提升业务路径覆盖率与问题发现效率。 UI智能遍历测试是一种基于状态识别、路径探索与动态反馈的自动化测试方法,解决传统Monkey测试覆盖不均、重复无效操作等问题。通过构建UI状态图、智能去重、覆盖驱动路径规划及多维度异常检测,显著提升业务路径覆盖率与问题发现效率。
- 本文探讨自动化回归测试中易被忽视的核心问题:需求变更后,用例仍按旧规则执行,导致覆盖失效、断言失准、路径过时。提出融合RAG、知识图谱与AI Agent的新范式,实现需求—测试资产动态关联、影响范围智能识别、边界用例精准生成及多维度结果校验,提升回归测试业务契合度与适应性。 本文探讨自动化回归测试中易被忽视的核心问题:需求变更后,用例仍按旧规则执行,导致覆盖失效、断言失准、路径过时。提出融合RAG、知识图谱与AI Agent的新范式,实现需求—测试资产动态关联、影响范围智能识别、边界用例精准生成及多维度结果校验,提升回归测试业务契合度与适应性。
- 摘要:以Meta公开的WhatsApp端侧Scam Alert架构为事实起点,拆解端侧AI既要识别诈骗又不能扩张消息用途的测试难题,给出数据出境、模型完整性、实验分流、透明日志、对抗样本与持续评测方案。用户收到一条“快递丢失,点击链接领取赔偿”的消息。手机上的反诈骗模型判定风险较高,弹出提醒。功能看起来很简单,但测试团队马上会遇到两组互相拉扯的问题:如果模型看不到足够内容,诈骗识别可能变差;... 摘要:以Meta公开的WhatsApp端侧Scam Alert架构为事实起点,拆解端侧AI既要识别诈骗又不能扩张消息用途的测试难题,给出数据出境、模型完整性、实验分流、透明日志、对抗样本与持续评测方案。用户收到一条“快递丢失,点击链接领取赔偿”的消息。手机上的反诈骗模型判定风险较高,弹出提醒。功能看起来很简单,但测试团队马上会遇到两组互相拉扯的问题:如果模型看不到足够内容,诈骗识别可能变差;...
- 大家好,我是某互联网大厂的质量保障团队负责人,今年深度参与了秋招面试。上周,一个学弟给我发来他的offer对比。一个是某中厂的功能测试岗,月薪11K;另一个是某大厂的AI测试开发岗,月薪35K,15薪。他问我:“哥,我是不是应该选第二个?但是AI测试我没做过,怕去了跟不上。”我说:“你先把两个offer的薪资乘以12,看看差了多少。”他算了一下:“一个13万,一个52万。差了将近40万。”我... 大家好,我是某互联网大厂的质量保障团队负责人,今年深度参与了秋招面试。上周,一个学弟给我发来他的offer对比。一个是某中厂的功能测试岗,月薪11K;另一个是某大厂的AI测试开发岗,月薪35K,15薪。他问我:“哥,我是不是应该选第二个?但是AI测试我没做过,怕去了跟不上。”我说:“你先把两个offer的薪资乘以12,看看差了多少。”他算了一下:“一个13万,一个52万。差了将近40万。”我...
- 本文基于美团31万行AI重构实践,指出AI Coding加速下测试需从执行回归转向风险定义:聚焦高风险边界识别、可验证证据构建与质量门禁建设,推动测试前移,成为AI研发规模化落地的关键保障。 本文基于美团31万行AI重构实践,指出AI Coding加速下测试需从执行回归转向风险定义:聚焦高风险边界识别、可验证证据构建与质量门禁建设,推动测试前移,成为AI研发规模化落地的关键保障。
- 本项目基于Playwright MCP可访问性快照,构建本地商城Browser Agent,聚焦页面变化鲁棒性、隐藏指令防御与权限边界管控。通过结构化快照替代坐标依赖,结合行为断言(非截图)验证工具调用、域名访问与副作用,覆盖6类异常场景,支持安全回归测试。 本项目基于Playwright MCP可访问性快照,构建本地商城Browser Agent,聚焦页面变化鲁棒性、隐藏指令防御与权限边界管控。通过结构化快照替代坐标依赖,结合行为断言(非截图)验证工具调用、域名访问与副作用,覆盖6类异常场景,支持安全回归测试。
- 摘要:从OpenAI与Ironclad公开的专业工作流研究出发,用合同修改场景拆解Computer Use Agent的状态识别、业务约束、副作用、证据链与持续回归。一份采购合同只需要把付款周期从“30天”改成“45天”。Agent打开合同系统,找到付款条款,完成修改,页面弹出“保存成功”。如果这是普通UI自动化,用例大概已经结束了。但真正的合同业务不会这么简单:它可能误改了另一份同名合同;... 摘要:从OpenAI与Ironclad公开的专业工作流研究出发,用合同修改场景拆解Computer Use Agent的状态识别、业务约束、副作用、证据链与持续回归。一份采购合同只需要把付款周期从“30天”改成“45天”。Agent打开合同系统,找到付款条款,完成修改,页面弹出“保存成功”。如果这是普通UI自动化,用例大概已经结束了。但真正的合同业务不会这么简单:它可能误改了另一份同名合同;...
- 本文以采购申请为案例,拆解Google Gemini跨应用Agent的五大测试风险:身份继承、上下文来源、长任务状态、模型路由变化与不可逆副作用,提出可落地的验收结构与CI实践,助力测试团队从页面验证升级为委托边界定义。 本文以采购申请为案例,拆解Google Gemini跨应用Agent的五大测试风险:身份继承、上下文来源、长任务状态、模型路由变化与不可逆副作用,提出可落地的验收结构与CI实践,助力测试团队从页面验证升级为委托边界定义。
- 摘要:从近期决策模型Jev切入,拆解“只输出概率”的AI质检器为什么仍会产生高置信误判,并给出数据集、阈值、校准、漂移和CI门禁的完整测试方法。客服回复了一句:“已经帮您申请退款,预计三个工作日到账。”AI质检器返回:合规概率0.94。流水线据此放行,第二天业务才发现,这个订单根本不满足退款条件,客服也没有真正发起退款。这类问题和聊天机器人答错不一样。决策模型不负责写一段漂亮答案,它只做判断... 摘要:从近期决策模型Jev切入,拆解“只输出概率”的AI质检器为什么仍会产生高置信误判,并给出数据集、阈值、校准、漂移和CI门禁的完整测试方法。客服回复了一句:“已经帮您申请退款,预计三个工作日到账。”AI质检器返回:合规概率0.94。流水线据此放行,第二天业务才发现,这个订单根本不满足退款条件,客服也没有真正发起退款。这类问题和聊天机器人答错不一样。决策模型不负责写一段漂亮答案,它只做判断...
- 去年Q4,我们重构运行6年的C++交易核心服务。面对跨4-5项目、多语言混杂、分支繁杂的历史代码,团队将重构沉淀为标准化Skill:分四步链路分析、AI辅助查漏+人工决策、DDD分层编码。成果显著——链路分析从2-3天缩至40分钟,P99延迟由180ms降至45ms,零回滚。 去年Q4,我们重构运行6年的C++交易核心服务。面对跨4-5项目、多语言混杂、分支繁杂的历史代码,团队将重构沉淀为标准化Skill:分四步链路分析、AI辅助查漏+人工决策、DDD分层编码。成果显著——链路分析从2-3天缩至40分钟,P99延迟由180ms降至45ms,零回滚。
- 本文基于31万行代码重构实践,提出AI Coding时代质量保障五大支柱:统一AI Rule与工程规范、固化Skill应对重复任务、AI辅助技术债排查、前置AI Code Review、风险驱动的测试设计,并倡导渐进式重构。强调AI提效不等于质量自动提升,需以标准、验证与闭环体系筑牢质量防线。 本文基于31万行代码重构实践,提出AI Coding时代质量保障五大支柱:统一AI Rule与工程规范、固化Skill应对重复任务、AI辅助技术债排查、前置AI Code Review、风险驱动的测试设计,并倡导渐进式重构。强调AI提效不等于质量自动提升,需以标准、验证与闭环体系筑牢质量防线。
- 本文聚焦DeepSeek Harness 0.2升级测试本质:非功能点验证,而是保障发行组合、历史会话迁移(v0→v4)、多Agent状态一致性、多环境执行(local/sandbox/SSH)、工具协议与Prompt Cache协同、桌面端安全及工程门禁等核心能力持续稳定。基于rc.2与alpha.1差异,提炼可复用的平台级升级测试方法。 本文聚焦DeepSeek Harness 0.2升级测试本质:非功能点验证,而是保障发行组合、历史会话迁移(v0→v4)、多Agent状态一致性、多环境执行(local/sandbox/SSH)、工具协议与Prompt Cache协同、桌面端安全及工程门禁等核心能力持续稳定。基于rc.2与alpha.1差异,提炼可复用的平台级升级测试方法。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签