- 上周有个图像分类的任务在 ModelArts 上跑了两个多小时,最后十分钟因为一个我完全没预料到的原因挂掉,前面的 checkpoint 也因为没配自动保存策略而丢了。那天加班到很晚,但真正让我难受的不是这次失败,而是意识到:我对训练任务的「可恢复性」几乎一无所知,只能靠人肉守着看。这篇文章算是我交过的学费总结,围绕三个问题展开:训练任务怎么配才能在意外中断后自动接上、超参搜索怎么跑才不至于... 上周有个图像分类的任务在 ModelArts 上跑了两个多小时,最后十分钟因为一个我完全没预料到的原因挂掉,前面的 checkpoint 也因为没配自动保存策略而丢了。那天加班到很晚,但真正让我难受的不是这次失败,而是意识到:我对训练任务的「可恢复性」几乎一无所知,只能靠人肉守着看。这篇文章算是我交过的学费总结,围绕三个问题展开:训练任务怎么配才能在意外中断后自动接上、超参搜索怎么跑才不至于...
- 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 调度延迟:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Redis 替换原方案中耦合较重的部分,把 连接池 拆成独立可水平扩展的单元。关键点有三:1. 改用二进制协议减少带宽2. 边界条件单独处理,避免主链路被污染3. 保留灰度开关,便于回滚... 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 调度延迟:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Redis 替换原方案中耦合较重的部分,把 连接池 拆成独立可水平扩展的单元。关键点有三:1. 改用二进制协议减少带宽2. 边界条件单独处理,避免主链路被污染3. 保留灰度开关,便于回滚...
- 照抄 README 的 quickstart 命令会直接 FileNotFoundError:output/ 目录不在仓库里,而 export_result() 没有建父目录。顺带发现 scripts 不支持 python -m 运行。本文记录完整的复现、定位与修复验证过程。 照抄 README 的 quickstart 命令会直接 FileNotFoundError:output/ 目录不在仓库里,而 export_result() 没有建父目录。顺带发现 scripts 不支持 python -m 运行。本文记录完整的复现、定位与修复验证过程。
- 一、 前言随着开源大模型生态的空前繁荣(如阿里 Qwen、Meta Llama 3、智谱 ChatGLM 等),越来越多的企业和开发者希望拥有属于自己的“私有大模型”。然而,本地部署往往面临两大拦路虎:1. 硬件成本高昂:动辄需要多张专业级 GPU(如 A100/H100),个人或中小团队难以承受。2. 运维部署复杂:环境配置、CUDA 版本冲突、模型加速优化(如 vLLM、TensorRT... 一、 前言随着开源大模型生态的空前繁荣(如阿里 Qwen、Meta Llama 3、智谱 ChatGLM 等),越来越多的企业和开发者希望拥有属于自己的“私有大模型”。然而,本地部署往往面临两大拦路虎:1. 硬件成本高昂:动辄需要多张专业级 GPU(如 A100/H100),个人或中小团队难以承受。2. 运维部署复杂:环境配置、CUDA 版本冲突、模型加速优化(如 vLLM、TensorRT...
- 记录一次 ModelArts 数据导入与 LoRA 微调实践:识别 messages 字段报错的格式原因,区分上传、导入、精炼、训练完成、资产发布和服务就绪,附 JSONL 字段检查代码。 记录一次 ModelArts 数据导入与 LoRA 微调实践:识别 messages 字段报错的格式原因,区分上传、导入、精炼、训练完成、资产发布和服务就绪,附 JSONL 字段检查代码。
- 导读:AI测试用例生成是指利用大语言模型(LLM)与约束求解技术,融合需求文档、源代码和历史缺陷三类数据,自动生成高质量、可执行测试用例的技术。本文介绍的“AI驱动的自动化测试用例生成方法及系统"(专利号:ZL202611022773.9)通过"多源融合建模 → 风险驱动规划 → LLM混合生成 → 覆盖贡献精简 → 脚本化部署"的完整链路,系统性解决了传统测试用例生成方法中模板僵化、语义缺... 导读:AI测试用例生成是指利用大语言模型(LLM)与约束求解技术,融合需求文档、源代码和历史缺陷三类数据,自动生成高质量、可执行测试用例的技术。本文介绍的“AI驱动的自动化测试用例生成方法及系统"(专利号:ZL202611022773.9)通过"多源融合建模 → 风险驱动规划 → LLM混合生成 → 覆盖贡献精简 → 脚本化部署"的完整链路,系统性解决了传统测试用例生成方法中模板僵化、语义缺...
- 本文不展开产品选型,只聚焦工程层面如何把方案做稳。现状与问题在原有架构下,核心瓶颈集中在 调度延迟:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Kafka 替换原方案中耦合较重的部分,把 冷启动 拆成独立可水平扩展的单元。关键点有三:1. 本地缓存 + 分布式缓存两级2. 边界条件单独处理,避免主链路被污染3. 保留灰度开关,便于回滚落地与验证分... 本文不展开产品选型,只聚焦工程层面如何把方案做稳。现状与问题在原有架构下,核心瓶颈集中在 调度延迟:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Kafka 替换原方案中耦合较重的部分,把 冷启动 拆成独立可水平扩展的单元。关键点有三:1. 本地缓存 + 分布式缓存两级2. 边界条件单独处理,避免主链路被污染3. 保留灰度开关,便于回滚落地与验证分...
- 下面按「问题定位 → 方案设计 → 落地验证 → 效果对比」四个阶段展开。现状与问题在原有架构下,核心瓶颈集中在 冷启动:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Nginx 替换原方案中耦合较重的部分,把 写入链路 拆成独立可水平扩展的单元。关键点有三:1. 本地缓存 + 分布式缓存两级2. 边界条件单独处理,避免主链路被污染3. 保留灰度开... 下面按「问题定位 → 方案设计 → 落地验证 → 效果对比」四个阶段展开。现状与问题在原有架构下,核心瓶颈集中在 冷启动:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Nginx 替换原方案中耦合较重的部分,把 写入链路 拆成独立可水平扩展的单元。关键点有三:1. 本地缓存 + 分布式缓存两级2. 边界条件单独处理,避免主链路被污染3. 保留灰度开...
- 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 缓存命中率:镜像预热 + 实例分级。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 FunctionGraph 替换原方案中耦合较重的部分,把 连接池 拆成独立可水平扩展的单元。关键点有三:1. 连接复用并设置合理上限2. 边界条件单独处理,避免主链路被污染3. 保留... 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 缓存命中率:镜像预热 + 实例分级。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 FunctionGraph 替换原方案中耦合较重的部分,把 连接池 拆成独立可水平扩展的单元。关键点有三:1. 连接复用并设置合理上限2. 边界条件单独处理,避免主链路被污染3. 保留...
- 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 缓存命中率:改用二进制协议减少带宽。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Docker 替换原方案中耦合较重的部分,把 冷启动 拆成独立可水平扩展的单元。关键点有三:1. 连接复用并设置合理上限2. 边界条件单独处理,避免主链路被污染3. 保留灰度开关,便于... 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 缓存命中率:改用二进制协议减少带宽。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 Docker 替换原方案中耦合较重的部分,把 冷启动 拆成独立可水平扩展的单元。关键点有三:1. 连接复用并设置合理上限2. 边界条件单独处理,避免主链路被污染3. 保留灰度开关,便于...
- 问题现象在 ModelArts 把模型部署为在线服务后,状态长时间停在"部署中",或直接失败并提示 部署失败。排查三步配额是否够:账号的资源配额不足是最常见原因,尤其 GPU 规格。到"资源管理"或配额页确认规格是否有余量,不够就先申请配额。规格与镜像是否匹配:所选 CPU/GPU 规格要与模型镜像兼容;自定义镜像的地址要写对,且该镜像能被平台拉取。模型文件是否就绪:模型来源(OBS 路径)... 问题现象在 ModelArts 把模型部署为在线服务后,状态长时间停在"部署中",或直接失败并提示 部署失败。排查三步配额是否够:账号的资源配额不足是最常见原因,尤其 GPU 规格。到"资源管理"或配额页确认规格是否有余量,不够就先申请配额。规格与镜像是否匹配:所选 CPU/GPU 规格要与模型镜像兼容;自定义镜像的地址要写对,且该镜像能被平台拉取。模型文件是否就绪:模型来源(OBS 路径)...
- 自定义镜像部署 ModelArts 在线服务的实战记录:ma-user 用户、8080 端口、/home/mind/model 三条硬约束,加上架构不一致、健康检查、路径写死等五个高频坑的排查思路。 自定义镜像部署 ModelArts 在线服务的实战记录:ma-user 用户、8080 端口、/home/mind/model 三条硬约束,加上架构不一致、健康检查、路径写死等五个高频坑的排查思路。
- 华为云多服务体验焕新已上线,覆盖控制台、基础设施、Data&AI、数据库、安全、云监控、交易对账及官网页面等领域。 华为云多服务体验焕新已上线,覆盖控制台、基础设施、Data&AI、数据库、安全、云监控、交易对账及官网页面等领域。
- 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 连接池:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 CodeArts 替换原方案中耦合较重的部分,把 缓存命中率 拆成独立可水平扩展的单元。关键点有三:1. 本地缓存 + 分布式缓存两级2. 边界条件单独处理,避免主链路被污染3. 保留灰度... 本文结合近期项目实践,整理了一套相对通用的思路,希望对同行有所启发。现状与问题在原有架构下,核心瓶颈集中在 连接池:预拉取减少按需加载抖动。随着业务量增长,该问题在高峰期被进一步放大。方案设计整体思路是用 CodeArts 替换原方案中耦合较重的部分,把 缓存命中率 拆成独立可水平扩展的单元。关键点有三:1. 本地缓存 + 分布式缓存两级2. 边界条件单独处理,避免主链路被污染3. 保留灰度...
- 本文记录在真实项目中使用华为云CodeArts代码智能体的实战经验,涵盖AI辅助编码、自动化测试、代码评审与持续交付四个关键场景。 本文记录在真实项目中使用华为云CodeArts代码智能体的实战经验,涵盖AI辅助编码、自动化测试、代码评审与持续交付四个关键场景。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签