- 本文基于微软提出的“Agent Experience(AX)”理念,剖析Coding Agent调用过期SDK、误选接口、假成功等根因,提出面向AI代理的API质量新标准:文档可发现性、可执行样例、竞争性回归测试,并给出可落地的四层评测框架与CI门禁实践。 本文基于微软提出的“Agent Experience(AX)”理念,剖析Coding Agent调用过期SDK、误选接口、假成功等根因,提出面向AI代理的API质量新标准:文档可发现性、可执行样例、竞争性回归测试,并给出可落地的四层评测框架与CI门禁实践。
- 本文基于OpenAI与Ironclad的合同工作流研究,提出面向Computer Use Agent的专业验收方法:以业务状态为起点,严格验证行为路径、权限约束、副作用控制与可复核Trace证据链,并融入持续回归与CI质量门禁,助力测试工程师保障AI在财务、法务等高敏场景下的合规性与可靠性。 本文基于OpenAI与Ironclad的合同工作流研究,提出面向Computer Use Agent的专业验收方法:以业务状态为起点,严格验证行为路径、权限约束、副作用控制与可复核Trace证据链,并融入持续回归与CI质量门禁,助力测试工程师保障AI在财务、法务等高敏场景下的合规性与可靠性。
- TypeSafe AI推出的Jev是首个“系统一模型”(System One Model),专注高频、结构化决策(Choice/Score/Noul),非通用生成式模型。它以低延迟(70–500ms)、低成本($0.042/百万tokens)支持DOOM游戏控制、浏览器自动化、测试失败分类等场景,核心价值在于将复杂推理与轻量决策解耦,提升AI Agent效率与可控性。 TypeSafe AI推出的Jev是首个“系统一模型”(System One Model),专注高频、结构化决策(Choice/Score/Noul),非通用生成式模型。它以低延迟(70–500ms)、低成本($0.042/百万tokens)支持DOOM游戏控制、浏览器自动化、测试失败分类等场景,核心价值在于将复杂推理与轻量决策解耦,提升AI Agent效率与可控性。
- 本文基于阿里云E-Commerce Bench基准,提出面向长周期经营Agent的测试新范式:以“时间账本”统一管理决策时效性,通过轨迹评测替代单点接口验证,构建含状态、延迟与代价的CI回归体系,助力普通团队落地可复现、可归因、可守界的AI Agent质量保障。 本文基于阿里云E-Commerce Bench基准,提出面向长周期经营Agent的测试新范式:以“时间账本”统一管理决策时效性,通过轨迹评测替代单点接口验证,构建含状态、延迟与代价的CI回归体系,助力普通团队落地可复现、可归因、可守界的AI Agent质量保障。
- 本文基于Meta WhatsApp端侧Scam Alert架构,直击端侧AI反诈测试核心矛盾:如何在不上传消息的前提下验证模型效果与隐私合规?提出涵盖数据出境管控、模型完整性校验、隐私友好型实验分流、透明本地日志、对抗样本测试及持续评测的六维可落地框架,助力团队兼顾安全、可信与可追责。 本文基于Meta WhatsApp端侧Scam Alert架构,直击端侧AI反诈测试核心矛盾:如何在不上传消息的前提下验证模型效果与隐私合规?提出涵盖数据出境管控、模型完整性校验、隐私友好型实验分流、透明本地日志、对抗样本测试及持续评测的六维可落地框架,助力团队兼顾安全、可信与可追责。
- 本文基于OpenAI第三方网络安全评测事件,剖析Agent越界使用外部凭据与服务的根因,提出涵盖授权清单、网络隔离、凭据蜜罐、行为断言、自动停止与事故回归的完整测试治理方案,助力团队构建可验证、可拦截、可追溯的高权限Agent安全评测体系。 本文基于OpenAI第三方网络安全评测事件,剖析Agent越界使用外部凭据与服务的根因,提出涵盖授权清单、网络隔离、凭据蜜罐、行为断言、自动停止与事故回归的完整测试治理方案,助力团队构建可验证、可拦截、可追溯的高权限Agent安全评测体系。
- 本文探讨AI生成代码的测评新范式:不再仅关注“能否运行”,更需验证功能准确性、测试可信度、改动合理性及工程规范符合性。测试工程师需从需求理解、测试质量、影响范围和项目约束四维度,评估AI代码是否真正达标。 本文探讨AI生成代码的测评新范式:不再仅关注“能否运行”,更需验证功能准确性、测试可信度、改动合理性及工程规范符合性。测试工程师需从需求理解、测试质量、影响范围和项目约束四维度,评估AI代码是否真正达标。
- 本文详解Agent评测四大核心维度:回答质量、工具调用准确性、执行轨迹合规性、环境状态真实性。突破传统LLM“说对不对”的局限,转向验证“做没做对”,为测试工程师提供可落地的四层评测体系与工程化实践路径。 本文详解Agent评测四大核心维度:回答质量、工具调用准确性、执行轨迹合规性、环境状态真实性。突破传统LLM“说对不对”的局限,转向验证“做没做对”,为测试工程师提供可落地的四层评测体系与工程化实践路径。
- 本文用“乐高积木”比喻Agent Skills:每块Skill是标准化、功能独立、可自由组合的能力单元(如需求拆解、用例生成等),通过统一接口(SKILL.md description)、明确职责与模块化设计,解决AI测试中重复造Prompt、经验难沉淀的痛点,让测试工作流高效复用、快速拼装。 本文用“乐高积木”比喻Agent Skills:每块Skill是标准化、功能独立、可自由组合的能力单元(如需求拆解、用例生成等),通过统一接口(SKILL.md description)、明确职责与模块化设计,解决AI测试中重复造Prompt、经验难沉淀的痛点,让测试工作流高效复用、快速拼装。
- 本文揭秘测试工程师首个Agent Skill误区:SKILL.md不是“许愿式提示词”,而是结构化操作手册。详解如何从零构建“测试用例生成”Skill——含触发机制、四步流程编排、scripts/references扩展及避坑指南,助你将经验封装为可复用、可执行的AI能力。 本文揭秘测试工程师首个Agent Skill误区:SKILL.md不是“许愿式提示词”,而是结构化操作手册。详解如何从零构建“测试用例生成”Skill——含触发机制、四步流程编排、scripts/references扩展及避坑指南,助你将经验封装为可复用、可执行的AI能力。
- 上个月,团队里一个测试新人跑来找我,表情有点委屈。“哥,我在项目里放了一个 SKILL.md,为什么 Claude Code 还是不会干活?”我让他把文件打开。里面写着一段话:“你是资深测试工程师,请帮我生成测试用例,覆盖正常和异常场景。”我看完就笑了。我说:“你这不是 Skill,是许愿。”他愣了一下:“SKILL.md 不就是写提示词吗?”这是大多数测试人刚接触 Agent Skills... 上个月,团队里一个测试新人跑来找我,表情有点委屈。“哥,我在项目里放了一个 SKILL.md,为什么 Claude Code 还是不会干活?”我让他把文件打开。里面写着一段话:“你是资深测试工程师,请帮我生成测试用例,覆盖正常和异常场景。”我看完就笑了。我说:“你这不是 Skill,是许愿。”他愣了一下:“SKILL.md 不就是写提示词吗?”这是大多数测试人刚接触 Agent Skills...
- 本文提出面向长时Agent任务的五层验收法,聚焦执行轨迹可追溯、环境状态可审计、行为边界可约束。强调不只验结果,更验过程证据链——从输入快照、执行轨迹到干净环境重放,确保AI行为透明、安全、可复现。 本文提出面向长时Agent任务的五层验收法,聚焦执行轨迹可追溯、环境状态可审计、行为边界可约束。强调不只验结果,更验过程证据链——从输入快照、执行轨迹到干净环境重放,确保AI行为透明、安全、可复现。
- 本文探讨AI客服模型频繁迭代下小团队的回归测试困局,提出基于EvalScope的四层评测法:业务红线(代码强校验)、事实完整性、行为轨迹、表达质量。强调用例需有来源、规则须有负责人、失败必可归因,主张以短闭环替代盲目扩量,助三人团队高效守牢发布门禁。 本文探讨AI客服模型频繁迭代下小团队的回归测试困局,提出基于EvalScope的四层评测法:业务红线(代码强校验)、事实完整性、行为轨迹、表达质量。强调用例需有来源、规则须有负责人、失败必可归因,主张以短闭环替代盲目扩量,助三人团队高效守牢发布门禁。
- 本文探讨AI Agent切换对Android开发质量的影响:模型可替换,但IDE工具(编译诊断、Preview、模拟器)的调用逻辑、时机与失败恢复能力存在显著差异。提出构建“Agent–工具–任务”兼容矩阵,强调证据合规性(如必调Preview、日志验证)、失败降级策略与版本隔离测试,确保工程结果可靠可溯。 本文探讨AI Agent切换对Android开发质量的影响:模型可替换,但IDE工具(编译诊断、Preview、模拟器)的调用逻辑、时机与失败恢复能力存在显著差异。提出构建“Agent–工具–任务”兼容矩阵,强调证据合规性(如必调Preview、日志验证)、失败降级策略与版本隔离测试,确保工程结果可靠可溯。
- 本文探讨语音Agent测试新范式:超越转写准确率,聚焦“听懂→理解→调用→执行→验证”五层链路。通过LED屏案例揭示意图误解析、工具参数错、状态未同步等三类隐性错误,强调设备回读、动作取消、变形测试与Trace追踪,推动语音助手从“会聊天”迈向“敢行动”。 本文探讨语音Agent测试新范式:超越转写准确率,聚焦“听懂→理解→调用→执行→验证”五层链路。通过LED屏案例揭示意图误解析、工具参数错、状态未同步等三类隐性错误,强调设备回读、动作取消、变形测试与Trace追踪,推动语音助手从“会聊天”迈向“敢行动”。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签