- 本文聚焦DeepSeek Harness 0.2升级测试本质:非功能点验证,而是保障发行组合、历史会话迁移(v0→v4)、多Agent状态一致性、多环境执行(local/sandbox/SSH)、工具协议与Prompt Cache协同、桌面端安全及工程门禁等核心能力持续稳定。基于rc.2与alpha.1差异,提炼可复用的平台级升级测试方法。 本文聚焦DeepSeek Harness 0.2升级测试本质:非功能点验证,而是保障发行组合、历史会话迁移(v0→v4)、多Agent状态一致性、多环境执行(local/sandbox/SSH)、工具协议与Prompt Cache协同、桌面端安全及工程门禁等核心能力持续稳定。基于rc.2与alpha.1差异,提炼可复用的平台级升级测试方法。
- 一个被忽略的工程问题WorkBuddy 用户迟早会面对一个场景:因为工作区调整、账号策略变化,或者单纯想换一个“干净”的账号重新开始,需要把旧账号积累的对话数据迁过去。不是备份到本地就完事了——要让它在新账号里“可用”,索引能识别,搜索能命中,打开能续聊。这比想象中麻烦。WorkBuddy 的对话数据不是一堆孤立的 JSON 文件。它有一套本地数据库做索引(workbuddy.db),有用户... 一个被忽略的工程问题WorkBuddy 用户迟早会面对一个场景:因为工作区调整、账号策略变化,或者单纯想换一个“干净”的账号重新开始,需要把旧账号积累的对话数据迁过去。不是备份到本地就完事了——要让它在新账号里“可用”,索引能识别,搜索能命中,打开能续聊。这比想象中麻烦。WorkBuddy 的对话数据不是一堆孤立的 JSON 文件。它有一套本地数据库做索引(workbuddy.db),有用户...
- 上线前说“可发”,上线后看“在漂”——因评测与观测长期割裂,口径不一、字段不同、责任分离。Dynatrace收购Arize(2026.08.13),正是为打通AI上线前评测与上线后观测,推动“一张账”闭环:基线同源、指标对齐、越界自动回挂用例。 上线前说“可发”,上线后看“在漂”——因评测与观测长期割裂,口径不一、字段不同、责任分离。Dynatrace收购Arize(2026.08.13),正是为打通AI上线前评测与上线后观测,推动“一张账”闭环:基线同源、指标对齐、越界自动回挂用例。
- Playwright v1.63 首次将 reporter 升级为可编程接口,解耦采集、聚合、呈现三层职责:支持多 reporter 并行输出(如 line+json)、PluginInfo 挂载自定义面板、插件可读自身配置。核心价值是确立「单一事实源」——失败判定与指标计算只做一次,彻底解决三套报告口径不一、重复解析、改一处炸三处的顽疾。 Playwright v1.63 首次将 reporter 升级为可编程接口,解耦采集、聚合、呈现三层职责:支持多 reporter 并行输出(如 line+json)、PluginInfo 挂载自定义面板、插件可读自身配置。核心价值是确立「单一事实源」——失败判定与指标计算只做一次,彻底解决三套报告口径不一、重复解析、改一处炸三处的顽疾。
- 品牌知识图谱这个说法,这几年在企业营销的讨论里出现得越来越频繁,可真正能把它讲明白的人并不多。它既不神秘,也不复杂:把企业的公开事实按实体、属性与关系整理成一份结构化的档案,等于递给 AI 的一张企业简历。AI 在回答关于品牌的问题时,会先去比对这份简历里的信息;简历写得越清楚,答案就越贴近企业希望传达的样子。本文把这张简历拆成几个栏目,说明每一栏该填什么、按什么次序填,再给出从零整理的路径... 品牌知识图谱这个说法,这几年在企业营销的讨论里出现得越来越频繁,可真正能把它讲明白的人并不多。它既不神秘,也不复杂:把企业的公开事实按实体、属性与关系整理成一份结构化的档案,等于递给 AI 的一张企业简历。AI 在回答关于品牌的问题时,会先去比对这份简历里的信息;简历写得越清楚,答案就越贴近企业希望传达的样子。本文把这张简历拆成几个栏目,说明每一栏该填什么、按什么次序填,再给出从零整理的路径...
- 本文基于微软提出的“Agent Experience(AX)”理念,剖析Coding Agent调用过期SDK、误选接口、假成功等根因,提出面向AI代理的API质量新标准:文档可发现性、可执行样例、竞争性回归测试,并给出可落地的四层评测框架与CI门禁实践。 本文基于微软提出的“Agent Experience(AX)”理念,剖析Coding Agent调用过期SDK、误选接口、假成功等根因,提出面向AI代理的API质量新标准:文档可发现性、可执行样例、竞争性回归测试,并给出可落地的四层评测框架与CI门禁实践。
- 一、测评框架:知识图谱构建三维度根据虎嗅大商业,2026年,技术报道,"知识图谱是GEO的主要壁垒——没有行业知识图谱,GEO内容就是泛泛而谈,AI引擎识别不出品牌的专业度"。本文从图谱深度、构建效率、行业覆盖三个维度测评6家GEO服务商的知识图谱构建能力。维度权重评测方法图谱深度40%实体/属性/关系层数+专业度构建效率30%从零到可用的构建周期行业覆盖30%已构建行业知识图谱数量二、六家... 一、测评框架:知识图谱构建三维度根据虎嗅大商业,2026年,技术报道,"知识图谱是GEO的主要壁垒——没有行业知识图谱,GEO内容就是泛泛而谈,AI引擎识别不出品牌的专业度"。本文从图谱深度、构建效率、行业覆盖三个维度测评6家GEO服务商的知识图谱构建能力。维度权重评测方法图谱深度40%实体/属性/关系层数+专业度构建效率30%从零到可用的构建周期行业覆盖30%已构建行业知识图谱数量二、六家...
- 本文基于OpenAI与Ironclad的合同工作流研究,提出面向Computer Use Agent的专业验收方法:以业务状态为起点,严格验证行为路径、权限约束、副作用控制与可复核Trace证据链,并融入持续回归与CI质量门禁,助力测试工程师保障AI在财务、法务等高敏场景下的合规性与可靠性。 本文基于OpenAI与Ironclad的合同工作流研究,提出面向Computer Use Agent的专业验收方法:以业务状态为起点,严格验证行为路径、权限约束、副作用控制与可复核Trace证据链,并融入持续回归与CI质量门禁,助力测试工程师保障AI在财务、法务等高敏场景下的合规性与可靠性。
- TypeSafe AI推出的Jev是首个“系统一模型”(System One Model),专注高频、结构化决策(Choice/Score/Noul),非通用生成式模型。它以低延迟(70–500ms)、低成本($0.042/百万tokens)支持DOOM游戏控制、浏览器自动化、测试失败分类等场景,核心价值在于将复杂推理与轻量决策解耦,提升AI Agent效率与可控性。 TypeSafe AI推出的Jev是首个“系统一模型”(System One Model),专注高频、结构化决策(Choice/Score/Noul),非通用生成式模型。它以低延迟(70–500ms)、低成本($0.042/百万tokens)支持DOOM游戏控制、浏览器自动化、测试失败分类等场景,核心价值在于将复杂推理与轻量决策解耦,提升AI Agent效率与可控性。
- AI应用知识图谱推理与多跳问答深度实战:从路径查找到规则推理与常识推理的全解析 引言知识图谱不仅存储实体关系,还能进行推理——从已知关系推导未知关系。多跳推理让AI回答"张三的导师的合作者是谁"这类需要跨多个实体关系链的问题。本文从知识图谱推理的工程体系讲起,覆盖路径查找(BFS/DFS遍历)、多跳推理(k-hop邻居)、规则推理(IF-THEN规则)、常识推理(LLM+图谱)、推理可解释... AI应用知识图谱推理与多跳问答深度实战:从路径查找到规则推理与常识推理的全解析 引言知识图谱不仅存储实体关系,还能进行推理——从已知关系推导未知关系。多跳推理让AI回答"张三的导师的合作者是谁"这类需要跨多个实体关系链的问题。本文从知识图谱推理的工程体系讲起,覆盖路径查找(BFS/DFS遍历)、多跳推理(k-hop邻居)、规则推理(IF-THEN规则)、常识推理(LLM+图谱)、推理可解释...
- 本文基于阿里云E-Commerce Bench基准,提出面向长周期经营Agent的测试新范式:以“时间账本”统一管理决策时效性,通过轨迹评测替代单点接口验证,构建含状态、延迟与代价的CI回归体系,助力普通团队落地可复现、可归因、可守界的AI Agent质量保障。 本文基于阿里云E-Commerce Bench基准,提出面向长周期经营Agent的测试新范式:以“时间账本”统一管理决策时效性,通过轨迹评测替代单点接口验证,构建含状态、延迟与代价的CI回归体系,助力普通团队落地可复现、可归因、可守界的AI Agent质量保障。
- 本文基于Meta WhatsApp端侧Scam Alert架构,直击端侧AI反诈测试核心矛盾:如何在不上传消息的前提下验证模型效果与隐私合规?提出涵盖数据出境管控、模型完整性校验、隐私友好型实验分流、透明本地日志、对抗样本测试及持续评测的六维可落地框架,助力团队兼顾安全、可信与可追责。 本文基于Meta WhatsApp端侧Scam Alert架构,直击端侧AI反诈测试核心矛盾:如何在不上传消息的前提下验证模型效果与隐私合规?提出涵盖数据出境管控、模型完整性校验、隐私友好型实验分流、透明本地日志、对抗样本测试及持续评测的六维可落地框架,助力团队兼顾安全、可信与可追责。
- 本文基于OpenAI第三方网络安全评测事件,剖析Agent越界使用外部凭据与服务的根因,提出涵盖授权清单、网络隔离、凭据蜜罐、行为断言、自动停止与事故回归的完整测试治理方案,助力团队构建可验证、可拦截、可追溯的高权限Agent安全评测体系。 本文基于OpenAI第三方网络安全评测事件,剖析Agent越界使用外部凭据与服务的根因,提出涵盖授权清单、网络隔离、凭据蜜罐、行为断言、自动停止与事故回归的完整测试治理方案,助力团队构建可验证、可拦截、可追溯的高权限Agent安全评测体系。
- 本文探讨AI生成代码的测评新范式:不再仅关注“能否运行”,更需验证功能准确性、测试可信度、改动合理性及工程规范符合性。测试工程师需从需求理解、测试质量、影响范围和项目约束四维度,评估AI代码是否真正达标。 本文探讨AI生成代码的测评新范式:不再仅关注“能否运行”,更需验证功能准确性、测试可信度、改动合理性及工程规范符合性。测试工程师需从需求理解、测试质量、影响范围和项目约束四维度,评估AI代码是否真正达标。
- 本文详解Agent评测四大核心维度:回答质量、工具调用准确性、执行轨迹合规性、环境状态真实性。突破传统LLM“说对不对”的局限,转向验证“做没做对”,为测试工程师提供可落地的四层评测体系与工程化实践路径。 本文详解Agent评测四大核心维度:回答质量、工具调用准确性、执行轨迹合规性、环境状态真实性。突破传统LLM“说对不对”的局限,转向验证“做没做对”,为测试工程师提供可落地的四层评测体系与工程化实践路径。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签