- 拆机,为了AI。 拆机,为了AI。
- 写在最前面:本markdown仅针对第六期训练营中出现的坑来做填坑处理,避免新人跟我之前一样被劝退了无数次而心态爆炸。详细做题过程移步论坛张小白处。 2020-11-10继专家判定之前北京四的服务器可能被我折腾坏了之后,重新开了一个新加坡的服务器从头做人。切到新加坡服务器之后,git报错如下:解决方法不是网上能搜到的,很简单,直接重装git即可解决。 Transformer-moe第一个作业... 写在最前面:本markdown仅针对第六期训练营中出现的坑来做填坑处理,避免新人跟我之前一样被劝退了无数次而心态爆炸。详细做题过程移步论坛张小白处。 2020-11-10继专家判定之前北京四的服务器可能被我折腾坏了之后,重新开了一个新加坡的服务器从头做人。切到新加坡服务器之后,git报错如下:解决方法不是网上能搜到的,很简单,直接重装git即可解决。 Transformer-moe第一个作业...
- 一、安装MindSpore1.15因为MindSpore目前只支持Python3.7.5(3.7.5小版本在.5以上好像也可以)和Python3.9,所以建议使用Anaconda进行安装。Anaconda主页:https://www.anaconda.com/进入到命令行界面(Windows在安装后有对应的Anaconda命令行,linux的话就直接终端运行)创建环境conda creat... 一、安装MindSpore1.15因为MindSpore目前只支持Python3.7.5(3.7.5小版本在.5以上好像也可以)和Python3.9,所以建议使用Anaconda进行安装。Anaconda主页:https://www.anaconda.com/进入到命令行界面(Windows在安装后有对应的Anaconda命令行,linux的话就直接终端运行)创建环境conda creat...
- 引言 神经网络的参数众多,我们需要选择合适的算法来进行参数的更新和学习,也就是优化器。优化器在神经网络模型训练的过程中有着十分重要的作用。 从SGD开始,神经网络模型优化器就一直在迭代和发展之中。如PyTorch就已经开源了包括SGD、Momentum、RMSprop、Adam、AdamW等等丰富的优化器。但是,由于深度学习模型本身的复杂性,深度学习模型框架自带的优化器本身可能... 引言 神经网络的参数众多,我们需要选择合适的算法来进行参数的更新和学习,也就是优化器。优化器在神经网络模型训练的过程中有着十分重要的作用。 从SGD开始,神经网络模型优化器就一直在迭代和发展之中。如PyTorch就已经开源了包括SGD、Momentum、RMSprop、Adam、AdamW等等丰富的优化器。但是,由于深度学习模型本身的复杂性,深度学习模型框架自带的优化器本身可能...
- 不花💰 ,就能体验 MindScience 不花💰 ,就能体验 MindScience
- 1 MindSpore介绍 1.1 关于MindSporeMindSpore是端边云全场景按需协同的华为自研AI计算框架,提供全场景统一API,为全场景AI的模型开发、模型运行、模型部署提供端到端能力。MindSpore采用端-边-云按需协作分布式架构、微分原生编程新范式以及AI Native新执行模式,实现更好的资源效率、安全可信,同时降低行业AI开发门槛、释放昇腾芯片算力,助力普惠AI... 1 MindSpore介绍 1.1 关于MindSporeMindSpore是端边云全场景按需协同的华为自研AI计算框架,提供全场景统一API,为全场景AI的模型开发、模型运行、模型部署提供端到端能力。MindSpore采用端-边-云按需协作分布式架构、微分原生编程新范式以及AI Native新执行模式,实现更好的资源效率、安全可信,同时降低行业AI开发门槛、释放昇腾芯片算力,助力普惠AI...
- EMA是什么 深度学习模型使用EMA更新介绍我们都知道,深度学习模型中权重的更新基本都是使用基于梯度的优化方法来更新的,但是也有一部分参数是使用特征的统计量来更新的,就比如BatchNormalization层。这里展示出PyTorch的源码,来自_BatchNorm基类。可以看到_BatchNorm层的Bn层也会基于一定的单层Batch特征进行一个特征统计,用来对self.running... EMA是什么 深度学习模型使用EMA更新介绍我们都知道,深度学习模型中权重的更新基本都是使用基于梯度的优化方法来更新的,但是也有一部分参数是使用特征的统计量来更新的,就比如BatchNormalization层。这里展示出PyTorch的源码,来自_BatchNorm基类。可以看到_BatchNorm层的Bn层也会基于一定的单层Batch特征进行一个特征统计,用来对self.running...
- 本文研究了昇思,这样的研究值得深思。 本文研究了昇思,这样的研究值得深思。
- 蓝军出击! 蓝军出击!
- 可视化工具使用户能够跟踪实验指标,例如损失和准确性,可视化模型图等。可视化训练过程对于问题的发现和模型收敛效果的确定非常重要,从而优化得到较好的模型设计。 可视化工具使用户能够跟踪实验指标,例如损失和准确性,可视化模型图等。可视化训练过程对于问题的发现和模型收敛效果的确定非常重要,从而优化得到较好的模型设计。
- Windows 11预览版+WSL2+docker+nvidia-docker+MindSpore1.3.0 Windows 11预览版+WSL2+docker+nvidia-docker+MindSpore1.3.0
- 本文介绍了MindSpore 1.3的新特性——端侧训练(Java的编译和伪训练) 本文介绍了MindSpore 1.3的新特性——端侧训练(Java的编译和伪训练)
- 本文介绍了MindSpore 1.3的新特性——端侧训练。 本文介绍了MindSpore 1.3的新特性——端侧训练。
- MindSpore新一代分子模拟库:SPONGE,由北大和深圳湾实验室高毅勤课题组与华为MindSpore团队联合开发,具有高性能、模块化等特性,是一个完全自主研发的分子模拟软件库。基于MindSpore自动并行、图算融合等特性,SPONGE可高效地完成传统分子模拟过程,利用MindSpore自动微分的特性,可以将神经网络等AI方法与传统分子模拟进行结合。背景介绍分子模拟是指利用计算机以原子... MindSpore新一代分子模拟库:SPONGE,由北大和深圳湾实验室高毅勤课题组与华为MindSpore团队联合开发,具有高性能、模块化等特性,是一个完全自主研发的分子模拟软件库。基于MindSpore自动并行、图算融合等特性,SPONGE可高效地完成传统分子模拟过程,利用MindSpore自动微分的特性,可以将神经网络等AI方法与传统分子模拟进行结合。背景介绍分子模拟是指利用计算机以原子...
- 引言:在模型的开发过程中,精度达不到预期常常让人头疼。为了帮助用户解决模型调试调优的问题,我们为MindSpore量身定做了可视化调试调优组件:MindInsight。 引言:在模型的开发过程中,精度达不到预期常常让人头疼。为了帮助用户解决模型调试调优的问题,我们为MindSpore量身定做了可视化调试调优组件:MindInsight。
上滑加载中
推荐直播
-
2024创原会年度技术峰会
2024/12/20 周五 09:00-12:00
华为云讲师团
2024创原会年度技术峰会将于12月20日在海南万宁石梅湾威斯汀酒店举办,本次大会将以“智能・进化”为主题探讨从Cloud Native到AI Native的新阶段企业如何通过AI技术重塑企业应用,围绕AI如何在千行万业落地进行深入交流,探索可以先行先试先成功的创新场景和实现路径。
回顾中 -
华为云开发者日·2024年度创享峰会
2024/12/23 周一 14:00-16:00
华为云讲师团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动,汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴,全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介,为开发者提供沉浸式学习与交流平台。开放创新,与开发者共创、共享、共赢未来。
去报名 -
GaussDB管理平台TPOPS,DBA高效运维的一站式解决方案
2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维,是否让你感到头疼不已?今天,华为云GaussDB管理平台将彻底来改观!本期直播,我们将深入探索GaussDB管理平台的TPOPS功能,带你感受一键式部署安装的便捷,和智能化运维管理的高效,让复杂的运维、管理变得简单,让简单变得可靠。
去报名
热门标签