- 《强化学习的数学原理》赵世钰 著 · 第 5 章第 4 章的算法需要知道环境的转移概率 ppp 和奖励 rrr(model-based)。现实中我们往往不知道——只能通过实际交互获得样本。蒙特卡罗方法就是"纯靠经验"学习的方法。 一、期望值估计:蒙特卡罗的核心思想 基本思想要估计随机变量 XXX 的期望 E[X]\mathbb{E}[X]E[X],采样 NNN 个样本 x1,x2,…,xNx... 《强化学习的数学原理》赵世钰 著 · 第 5 章第 4 章的算法需要知道环境的转移概率 ppp 和奖励 rrr(model-based)。现实中我们往往不知道——只能通过实际交互获得样本。蒙特卡罗方法就是"纯靠经验"学习的方法。 一、期望值估计:蒙特卡罗的核心思想 基本思想要估计随机变量 XXX 的期望 E[X]\mathbb{E}[X]E[X],采样 NNN 个样本 x1,x2,…,xNx...
- 内容平台的评论过滤,主防线是深度模型,但有个边缘场景它罩不住:新上线的小语种社区,标注数据只有几百条,深度模型完全没得训。翻出朴素贝叶斯救场,效果超出预期,记录这次老工具的复活。选它的理由三条:小样本可用,几百条标注就能跑;训练是数频次,秒级完成,新数据来了随手重训;推理是查表加法,单条评论微秒级,单机每秒几万条,成本约等于零。文本处理用字符级n-gram而不是分词:小语种的分词器质量存疑,... 内容平台的评论过滤,主防线是深度模型,但有个边缘场景它罩不住:新上线的小语种社区,标注数据只有几百条,深度模型完全没得训。翻出朴素贝叶斯救场,效果超出预期,记录这次老工具的复活。选它的理由三条:小样本可用,几百条标注就能跑;训练是数频次,秒级完成,新数据来了随手重训;推理是查表加法,单条评论微秒级,单机每秒几万条,成本约等于零。文本处理用字符级n-gram而不是分词:小语种的分词器质量存疑,...
- 今日焦点DeepSeek 发布 DeepSeek-V4.1-Flash-1017 模型:DeepSeek 推出新模型 DeepSeek-V4.1-Flash-1017,已同步上线官方 API、Hugging Face 与 OpenRouter 平台供用户调用 [8]。Replit 宣布将平台默认 AI 模型由 Anthropic 切换为 OpenAI:在线代码协作平台 Replit 宣布,其... 今日焦点DeepSeek 发布 DeepSeek-V4.1-Flash-1017 模型:DeepSeek 推出新模型 DeepSeek-V4.1-Flash-1017,已同步上线官方 API、Hugging Face 与 OpenRouter 平台供用户调用 [8]。Replit 宣布将平台默认 AI 模型由 Anthropic 切换为 OpenAI:在线代码协作平台 Replit 宣布,其...
- 去年年底,团队里一位同事改了一行 SKILL.md 的描述文字,把“优先查询订单状态”改成了“根据用户诉求选择合适工具”。代码没报错,pytest 全绿,PR 顺利合并。三天后线上开始出现跳过订单校验直接退款的事故。这件事让我意识到一个问题:我们给 Skill 写测试的方式,和给普通代码写测试的方式,几乎完全是两回事。 普通代码改坏了,测试挂掉;Skill 改坏了,Agent 依然“能跑”,... 去年年底,团队里一位同事改了一行 SKILL.md 的描述文字,把“优先查询订单状态”改成了“根据用户诉求选择合适工具”。代码没报错,pytest 全绿,PR 顺利合并。三天后线上开始出现跳过订单校验直接退款的事故。这件事让我意识到一个问题:我们给 Skill 写测试的方式,和给普通代码写测试的方式,几乎完全是两回事。 普通代码改坏了,测试挂掉;Skill 改坏了,Agent 依然“能跑”,...
- 上周 ARC Prize 公布了一组数字:Gemini 4 Argon 在 ARC-AGI-3 上拿到 97.5% 的得分,代价是 $4.8K 的推理成本。97.5% 很亮眼,$4.8K 更值得玩味——它揭示了一个趋势:前沿模型的智能,越来越不是"训练出来"的,而是"想出来"的。这就是过去一年最热的方向之一:推理时扩展(test-time scaling)。从"训练更大"到"想得更久"经典 ... 上周 ARC Prize 公布了一组数字:Gemini 4 Argon 在 ARC-AGI-3 上拿到 97.5% 的得分,代价是 $4.8K 的推理成本。97.5% 很亮眼,$4.8K 更值得玩味——它揭示了一个趋势:前沿模型的智能,越来越不是"训练出来"的,而是"想出来"的。这就是过去一年最热的方向之一:推理时扩展(test-time scaling)。从"训练更大"到"想得更久"经典 ...
- 基于 YOLO11 的番茄九 类 病害智能识别系统让一张番茄叶片照片告诉农户:“这是什么病、有多严重、怎么治。”一、背景1.1 行业痛点番茄是大棚和大田里产量与产值都最重要的茄科作物之一。但它有个出了名的毛病:怕病——早疫、晚疫、叶霉、斑枯、花叶病毒、黄化曲叶病毒、红蜘蛛、潜叶蛾……每一种都能在一周内把一茬番茄的产量直接打掉一半。而真正的痛点在田间识别:农户/合作社最常见的处理方式仍然是"看... 基于 YOLO11 的番茄九 类 病害智能识别系统让一张番茄叶片照片告诉农户:“这是什么病、有多严重、怎么治。”一、背景1.1 行业痛点番茄是大棚和大田里产量与产值都最重要的茄科作物之一。但它有个出了名的毛病:怕病——早疫、晚疫、叶霉、斑枯、花叶病毒、黄化曲叶病毒、红蜘蛛、潜叶蛾……每一种都能在一周内把一茬番茄的产量直接打掉一半。而真正的痛点在田间识别:农户/合作社最常见的处理方式仍然是"看...
- 噬菌体活化状态检测数据集 | 3700张YOLO生物医学数据集适用于电镜图像分析、噬菌体疗法研究与目标检测研究一、数据集概述本数据集来源于Roboflow-100生物医学基准,对显微图像中的噬菌体颗粒及其活化状态进行了标注,共包含约3700张高质量标注图像,覆盖2类噬菌体活化状态。随着抗生素耐药性问题日益严峻,噬菌体疗法重新成为研究热点。在噬菌体相关实验中,判定噬菌体颗粒是否处于活化(已侵染... 噬菌体活化状态检测数据集 | 3700张YOLO生物医学数据集适用于电镜图像分析、噬菌体疗法研究与目标检测研究一、数据集概述本数据集来源于Roboflow-100生物医学基准,对显微图像中的噬菌体颗粒及其活化状态进行了标注,共包含约3700张高质量标注图像,覆盖2类噬菌体活化状态。随着抗生素耐药性问题日益严峻,噬菌体疗法重新成为研究热点。在噬菌体相关实验中,判定噬菌体颗粒是否处于活化(已侵染...
- 脑肿瘤检测数据集 | 9900张YOLO医学影像数据集适用于脑肿瘤影像辅助筛查、病灶定位与目标检测研究一、数据集概述本数据集来源于Roboflow-100医学影像基准,对影像中的肿瘤区域进行了分型框标,共包含约9900张高质量标注图像,覆盖3类脑肿瘤分型。脑肿瘤的早期发现与准确定位对治疗方案制定与患者预后至关重要。放射科医师阅读MRI/CT影像工作量巨大,且病灶在不同序列与切面上的表现差异明... 脑肿瘤检测数据集 | 9900张YOLO医学影像数据集适用于脑肿瘤影像辅助筛查、病灶定位与目标检测研究一、数据集概述本数据集来源于Roboflow-100医学影像基准,对影像中的肿瘤区域进行了分型框标,共包含约9900张高质量标注图像,覆盖3类脑肿瘤分型。脑肿瘤的早期发现与准确定位对治疗方案制定与患者预后至关重要。放射科医师阅读MRI/CT影像工作量巨大,且病灶在不同序列与切面上的表现差异明...
- 从零理解模型训练:参数、损失与梯度下降的最小闭环 一、先看一个具体问题假设你手上有一份房屋数据,每条记录包含三个特征:面积、房龄、到地铁的距离,以及一个目标值:成交价。你想让机器学会"给定特征,预测价格"。用最朴素的语言描述这件事,机器需要做三件事:先猜一个规则,比如"价格 = 2 × 面积 − 3 × 房龄 + 0.5 × 距离 + 1.2";拿这个规则去算已有的数据,看算出来的价格和真... 从零理解模型训练:参数、损失与梯度下降的最小闭环 一、先看一个具体问题假设你手上有一份房屋数据,每条记录包含三个特征:面积、房龄、到地铁的距离,以及一个目标值:成交价。你想让机器学会"给定特征,预测价格"。用最朴素的语言描述这件事,机器需要做三件事:先猜一个规则,比如"价格 = 2 × 面积 − 3 × 房龄 + 0.5 × 距离 + 1.2";拿这个规则去算已有的数据,看算出来的价格和真...
- 摘要:TRAE Agent公开的方法里,一个容易被忽略的变化是:系统不再只让模型生成一份补丁,而是先制造多个候选,经回归过滤后再选择。真正值得测试团队研究的,不是榜单名次,而是“选择器会不会稳定地选中业务上正确的答案”。这不是“让模型再想一次”TRAE 团队公开的 Agent 方案里,有一段很容易被榜单成绩盖过去:针对同一个仓库级问题,系统可以让不同模型产生多份补丁,先用回归测试过滤,再由 ... 摘要:TRAE Agent公开的方法里,一个容易被忽略的变化是:系统不再只让模型生成一份补丁,而是先制造多个候选,经回归过滤后再选择。真正值得测试团队研究的,不是榜单名次,而是“选择器会不会稳定地选中业务上正确的答案”。这不是“让模型再想一次”TRAE 团队公开的 Agent 方案里,有一段很容易被榜单成绩盖过去:针对同一个仓库级问题,系统可以让不同模型产生多份补丁,先用回归测试过滤,再由 ...
- 当你阅读这句话时,大脑中的许多电路正在同时运作:调整姿势;控制呼吸;把屏幕上的线条和曲线识别成文字。这些处理大多不会进入你的主观意识。但有些脑内活动,你能够直接“访问”到。例如:脑海里突然浮现的一幅画面;你主动制定的购物计划;你刻意思考的一道题。神经科学家和哲学家有时会把后一类活动称为:Consciously Accessible,有意识可访问。与那些完全自动、你无法直接意识到的处理相比,这... 当你阅读这句话时,大脑中的许多电路正在同时运作:调整姿势;控制呼吸;把屏幕上的线条和曲线识别成文字。这些处理大多不会进入你的主观意识。但有些脑内活动,你能够直接“访问”到。例如:脑海里突然浮现的一幅画面;你主动制定的购物计划;你刻意思考的一道题。神经科学家和哲学家有时会把后一类活动称为:Consciously Accessible,有意识可访问。与那些完全自动、你无法直接意识到的处理相比,这...
- 上线一个转化率预估模型前,离线AUC0.89,上线后线上真实AUC只有0.71,排查两天,元凶是targetencoding的泄漏。复盘记录一下,这类问题极具隐蔽性。背景:城市、类目这类高基数类别特征,one-hot维度爆炸,于是用了targetencoding,把每个类别值替换成该类别的历史转化率均值。离线编码时直接对全量训练集统计,问题就出在这里:每个样本的编码值里,包含了它自己的标签信... 上线一个转化率预估模型前,离线AUC0.89,上线后线上真实AUC只有0.71,排查两天,元凶是targetencoding的泄漏。复盘记录一下,这类问题极具隐蔽性。背景:城市、类目这类高基数类别特征,one-hot维度爆炸,于是用了targetencoding,把每个类别值替换成该类别的历史转化率均值。离线编码时直接对全量训练集统计,问题就出在这里:每个样本的编码值里,包含了它自己的标签信...
- 一、引言随着人工智能技术的快速发展,大语言模型(Large Language Model,LLM)在自然语言处理、代码生成、智能问答和数据分析等领域展现出强大的能力。然而,如何让通用大语言模型适应特定行业和实际业务需求,仍然是人工智能应用开发中的重要问题。例如,一家医疗机构希望大语言模型能够理解专业医学术语,一家软件企业希望模型按照内部代码规范生成程序,或者一家金融机构希望模型按照特定格式分... 一、引言随着人工智能技术的快速发展,大语言模型(Large Language Model,LLM)在自然语言处理、代码生成、智能问答和数据分析等领域展现出强大的能力。然而,如何让通用大语言模型适应特定行业和实际业务需求,仍然是人工智能应用开发中的重要问题。例如,一家医疗机构希望大语言模型能够理解专业医学术语,一家软件企业希望模型按照内部代码规范生成程序,或者一家金融机构希望模型按照特定格式分...
- 一、引言随着人工智能技术的快速发展,大语言模型(Large Language Model,LLM)在自然语言理解、文本生成、代码编写和智能问答等领域展现出强大的能力。然而,在实际应用过程中,大语言模型仍然存在一些明显的局限性,例如知识更新不及时、专业领域信息不足,以及生成内容可能出现事实性错误等问题。传统大语言模型主要依赖训练阶段学习到的知识进行回答。当用户提出涉及最新信息、企业内部文档或专... 一、引言随着人工智能技术的快速发展,大语言模型(Large Language Model,LLM)在自然语言理解、文本生成、代码编写和智能问答等领域展现出强大的能力。然而,在实际应用过程中,大语言模型仍然存在一些明显的局限性,例如知识更新不及时、专业领域信息不足,以及生成内容可能出现事实性错误等问题。传统大语言模型主要依赖训练阶段学习到的知识进行回答。当用户提出涉及最新信息、企业内部文档或专...
- 市面上健身 App 要么免费版功能阉割,要么核心数据必须同步到云端,要么交互交互"为卖课设计"得让人找不到入口。作为一个有记录训练习惯的人,我决定用 AI Agent 从零开发一款**本地优先、数据自有、训练记录 10 秒内完成**的健身训练日管理 App。这篇博客记录全程:需求拆解、数据建模、与 AI 协作的方法论、踩过的坑,以及"AI 帮我做对了什么、我又该把关什么"。 市面上健身 App 要么免费版功能阉割,要么核心数据必须同步到云端,要么交互交互"为卖课设计"得让人找不到入口。作为一个有记录训练习惯的人,我决定用 AI Agent 从零开发一款**本地优先、数据自有、训练记录 10 秒内完成**的健身训练日管理 App。这篇博客记录全程:需求拆解、数据建模、与 AI 协作的方法论、踩过的坑,以及"AI 帮我做对了什么、我又该把关什么"。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签