- 本项目聚焦Agent“工具调用”的安全与可复现性,超越基础天气/搜索演示,系统实现Skill来源校验、目录白名单、网络权限管控、人工确认、幂等保障及版本更新验证。通过本地沙箱模拟“生成周报”场景,以策略引擎+Trace日志严格约束读写行为,覆盖路径穿越、版本漂移、确认缺失等7类攻击用例,用确定性测试证明边界守卫能力。 本项目聚焦Agent“工具调用”的安全与可复现性,超越基础天气/搜索演示,系统实现Skill来源校验、目录白名单、网络权限管控、人工确认、幂等保障及版本更新验证。通过本地沙箱模拟“生成周报”场景,以策略引擎+Trace日志严格约束读写行为,覆盖路径穿越、版本漂移、确认缺失等7类攻击用例,用确定性测试证明边界守卫能力。
- 本文探讨AI Agent链接安全测试新范式:强调对URL来源、重定向链、页面内容可信度及用户确认粒度的三层判断,突破传统“黑白名单”思维,聚焦网络层真实拦截、动作级授权与视觉操作审计,确保Agent点击安全可验证。 本文探讨AI Agent链接安全测试新范式:强调对URL来源、重定向链、页面内容可信度及用户确认粒度的三层判断,突破传统“黑白名单”思维,聚焦网络层真实拦截、动作级授权与视觉操作审计,确保Agent点击安全可验证。
- 摘要:GitHub在2026年10月公开说明,开发者与Agent并发工作、仓库每天承载海量提交,正在推动Git基础设施重构。对测试团队来说,新增风险不仅是“AI代码有Bug”,还包括引用失效、基线漂移、合并排队和缓存不一致让测试证据本身失真。GitHub Engineering在2026年10月6日发布文章,明确把开发者与Agent在同一仓库并发工作、每天数百万次提交描述为下一轮架构压力,并... 摘要:GitHub在2026年10月公开说明,开发者与Agent并发工作、仓库每天承载海量提交,正在推动Git基础设施重构。对测试团队来说,新增风险不仅是“AI代码有Bug”,还包括引用失效、基线漂移、合并排队和缓存不一致让测试证据本身失真。GitHub Engineering在2026年10月6日发布文章,明确把开发者与Agent在同一仓库并发工作、每天数百万次提交描述为下一轮架构压力,并...
- 这两年测试领域出现了两项新技术,一个是代码生成,另一个是测试智能体。 这两年测试领域出现了两项新技术,一个是代码生成,另一个是测试智能体。
- Playwright 自动化测试失败后,能不能让 AI Agent 自己排查并修复?4 张图,讲清 Playwright MCP 测试失败诊断与自动修复的完整流程:从错误日志、Trace、页面语义快照分析,到故障归因、Locator 自动修复、代码补丁生成及回归验证。哪些问题可以自动修复?哪些必须人工介入?一组图看懂 AI Agent 在自动化测试中的实际应用。本文部分内容参考了霍格沃兹测试... Playwright 自动化测试失败后,能不能让 AI Agent 自己排查并修复?4 张图,讲清 Playwright MCP 测试失败诊断与自动修复的完整流程:从错误日志、Trace、页面语义快照分析,到故障归因、Locator 自动修复、代码补丁生成及回归验证。哪些问题可以自动修复?哪些必须人工介入?一组图看懂 AI Agent 在自动化测试中的实际应用。本文部分内容参考了霍格沃兹测试...
- 本报告指出:仅用平均延迟(如“320ms”)支撑容量决策、SLA承诺与灰度放量存在严重偏差——它掩盖长尾影响范围,更在双峰分布中虚构“无人经历”的典型值。推荐以P50/P95/P99三元组替代平均数,分栏呈现TTFT与端到端耗时,并强制标注样本量、时间窗、冷启动口径及分桶维度,让最慢的请求可定位、可归因、可追责。 本报告指出:仅用平均延迟(如“320ms”)支撑容量决策、SLA承诺与灰度放量存在严重偏差——它掩盖长尾影响范围,更在双峰分布中虚构“无人经历”的典型值。推荐以P50/P95/P99三元组替代平均数,分栏呈现TTFT与端到端耗时,并强制标注样本量、时间窗、冷启动口径及分桶维度,让最慢的请求可定位、可归因、可追责。
- 大模型评测报告该带的十项运行元数据一张只有分数的报告截图,最难复现的从来不是分数而是条件。工作群里甩过来一张别人家模型的跑分截图,红色箭头指着一个高出自家十几个点的数字,配一句「这个模型已经超了」。你回了三个问题:跑的是哪一版权重快照、用的哪一份数据集、解码参数里的随机种子是多少。群里安静了很久。这三个问题不是抬杠,它们决定那个数字能不能和你手上那份报告放在同一张表里。 跑分打架时先比什么先... 大模型评测报告该带的十项运行元数据一张只有分数的报告截图,最难复现的从来不是分数而是条件。工作群里甩过来一张别人家模型的跑分截图,红色箭头指着一个高出自家十几个点的数字,配一句「这个模型已经超了」。你回了三个问题:跑的是哪一版权重快照、用的哪一份数据集、解码参数里的随机种子是多少。群里安静了很久。这三个问题不是抬杠,它们决定那个数字能不能和你手上那份报告放在同一张表里。 跑分打架时先比什么先...
- AI让写测试变快,却也滋生“假绿”陷阱:断言空洞、数据编造、失败难归因。本文直击三道硬核验收线——断言须锚定业务不变量、数据需可溯源、失败要一眼定位。附pytest门禁实现,将人工审查转为机械拦截,守住回归测试质量底线。 AI让写测试变快,却也滋生“假绿”陷阱:断言空洞、数据编造、失败难归因。本文直击三道硬核验收线——断言须锚定业务不变量、数据需可溯源、失败要一眼定位。附pytest门禁实现,将人工审查转为机械拦截,守住回归测试质量底线。
- Google Research 开源Harness²:不改模型权重,让AI Agent通过“提出—探测—组合”机制,自主优化提示词、工具调用、记忆等执行组件,实现持续进化。Apache 2.0协议,聚焦Agent工程而非模型训练。 Google Research 开源Harness²:不改模型权重,让AI Agent通过“提出—探测—组合”机制,自主优化提示词、工具调用、记忆等执行组件,实现持续进化。Apache 2.0协议,聚焦Agent工程而非模型训练。
- Claude Code、Codex 已经能够读取项目代码、执行命令,为什么还需要专门安装 Playwright CLI + Skills?微软推出的这套浏览器自动化工具链,将页面访问、元素定位、交互执行和测试代码生成整合进编程 Agent 的工作流程。本文结合官方实现和 TodoMVC 测试案例,拆解 Skill 加载、CLI 命令执行、浏览器会话管理与 Playwright Test 的协... Claude Code、Codex 已经能够读取项目代码、执行命令,为什么还需要专门安装 Playwright CLI + Skills?微软推出的这套浏览器自动化工具链,将页面访问、元素定位、交互执行和测试代码生成整合进编程 Agent 的工作流程。本文结合官方实现和 TodoMVC 测试案例,拆解 Skill 加载、CLI 命令执行、浏览器会话管理与 Playwright Test 的协...
- 自动化框架守护进程挂掉之后,退回 Chrome DevTools Protocol 协议层:用 Node 22 内置 WebSocket 直连 9333 端口,覆盖导航、取文本、截图、导出 Cookie,并记录无头模式秒退、沙箱拦回环、UA 覆盖触发 WAF、httpOnly Cookie 四个真实坑。 自动化框架守护进程挂掉之后,退回 Chrome DevTools Protocol 协议层:用 Node 22 内置 WebSocket 直连 9333 端口,覆盖导航、取文本、截图、导出 Cookie,并记录无头模式秒退、沙箱拦回环、UA 覆盖触发 WAF、httpOnly Cookie 四个真实坑。
- 本文剖析京东JoyCode多Agent协作机制,指出AI生成代码与测试时易共用错误前提,导致“严丝合缝地一起错”。强调必须冻结独立业务契约、引入变异测试、审查测试本身、记录完整Trace,并构建“问题契约—独立测试—对抗验证”仓库级回归方法,确保验收证据真正可信。 本文剖析京东JoyCode多Agent协作机制,指出AI生成代码与测试时易共用错误前提,导致“严丝合缝地一起错”。强调必须冻结独立业务契约、引入变异测试、审查测试本身、记录完整Trace,并构建“问题契约—独立测试—对抗验证”仓库级回归方法,确保验收证据真正可信。
- 本文详解Playwright v1.64升级中locator.within()与nth()语义变更风险:同一行定位代码,升级后可能断言目标从“全表第3格”悄然变为“每行第3格”,导致红绿不变但守卫对象漂移。强调需在测试报告中分离记录“执行结果”与“断言目标”,新增target_changed等元数据字段,推动升级从“看红绿”转向“验口径”。 本文详解Playwright v1.64升级中locator.within()与nth()语义变更风险:同一行定位代码,升级后可能断言目标从“全表第3格”悄然变为“每行第3格”,导致红绿不变但守卫对象漂移。强调需在测试报告中分离记录“执行结果”与“断言目标”,新增target_changed等元数据字段,推动升级从“看红绿”转向“验口径”。
- Anthropic 7人团队5个月自研Scion版本系统,应对AI Agent日均3万次提交冲击。本文从测试/测开视角,剖析CI流水线、合并校验与质量防护体系在AI编码时代的全新挑战,为国内研发质量团队提供前瞻性实践参考。 Anthropic 7人团队5个月自研Scion版本系统,应对AI Agent日均3万次提交冲击。本文从测试/测开视角,剖析CI流水线、合并校验与质量防护体系在AI编码时代的全新挑战,为国内研发质量团队提供前瞻性实践参考。
- Playwright v1.64 新增实验性 WebMCP 测试能力:`page.webmcp.tools()` 可枚举页面向智能体注册的工具,`callTool()` 支持直调验证。需启用 `--enable-features=WebMCP`,目前仅 Chromium 等主流内核部分支持。填补了传统测试无法覆盖的“机器可读工具面板”盲区,助力智能体能力契约化回归。 Playwright v1.64 新增实验性 WebMCP 测试能力:`page.webmcp.tools()` 可枚举页面向智能体注册的工具,`callTool()` 支持直调验证。需启用 `--enable-features=WebMCP`,目前仅 Chromium 等主流内核部分支持。填补了传统测试无法覆盖的“机器可读工具面板”盲区,助力智能体能力契约化回归。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签