- 开发者
- 大数据开发
#大数据开发#
- 在modelarts上使用notebook上使用evs空间默认大小是5G,能满足大部分文本和图片训练模型的需求。如果训练数据稍微超过这个限额,可以适当的扩增下空间。但如果训练对象是视频,或是实际生成过程中的海量数据,这个空间就显得小了,这时候扩增evs空间就显得很不经济了。最近老山便碰到这样的案例,客户的训练数据大约在1T的量级,在obs上存储的数据结构大概如下图所示。your-obs-na... 在modelarts上使用notebook上使用evs空间默认大小是5G,能满足大部分文本和图片训练模型的需求。如果训练数据稍微超过这个限额,可以适当的扩增下空间。但如果训练对象是视频,或是实际生成过程中的海量数据,这个空间就显得小了,这时候扩增evs空间就显得很不经济了。最近老山便碰到这样的案例,客户的训练数据大约在1T的量级,在obs上存储的数据结构大概如下图所示。your-obs-na...
- 华为云大咖说-大数据应用开发指导 赵军 华为云MRS服务架构师 因为今天是第一天上课,所以赵军先给大家讲解一下相关的概念方便今后的课程学习。 首先是一组概念,分按照公有云资源池模型可分为Region和AZ。两种模式为用户提供标准化的计算池以构建不同可用性的应用。对于客户来讲,可以有多种选择。每个AZ都有自己的独立空间,因此可以避免连续的故障发生。 接下来需要... 华为云大咖说-大数据应用开发指导 赵军 华为云MRS服务架构师 因为今天是第一天上课,所以赵军先给大家讲解一下相关的概念方便今后的课程学习。 首先是一组概念,分按照公有云资源池模型可分为Region和AZ。两种模式为用户提供标准化的计算池以构建不同可用性的应用。对于客户来讲,可以有多种选择。每个AZ都有自己的独立空间,因此可以避免连续的故障发生。 接下来需要...
- 拿到大量数据以后,通常需要使用Hadoop/Spark对数据集进行清洗。在这里我整理了Java中Lambda表达式的一些用法,希望能够提高大家的编码速度Lambda在Java 8中添加了Lambda新特性。如果接口中只有一个方法,则可以使用Lambda来完成。例如Runnable接口,只有一个run方法。在Java 8以下中我们需要这么写:new Thread(new Runnable(){... 拿到大量数据以后,通常需要使用Hadoop/Spark对数据集进行清洗。在这里我整理了Java中Lambda表达式的一些用法,希望能够提高大家的编码速度Lambda在Java 8中添加了Lambda新特性。如果接口中只有一个方法,则可以使用Lambda来完成。例如Runnable接口,只有一个run方法。在Java 8以下中我们需要这么写:new Thread(new Runnable(){...
- 第72届“世界大学生日”刚刚过去不久,这个节日本是为了在大学生中倡导追求和平、民主、自由和进步,如今,战乱过去已久,现今社会对人才的要求和期待越来越高,大学生也有着属于这个时代的使命与目标。 现如今,基于ICT 网络、以人工智能为引擎的第四次技术革命正将我们带入一个万物感知、万物互联、万物智能的智能世界。大学生在这个日益迅速进步的时代中,也需要时刻保持学习的心态,才能不落伍于时代,跟上... 第72届“世界大学生日”刚刚过去不久,这个节日本是为了在大学生中倡导追求和平、民主、自由和进步,如今,战乱过去已久,现今社会对人才的要求和期待越来越高,大学生也有着属于这个时代的使命与目标。 现如今,基于ICT 网络、以人工智能为引擎的第四次技术革命正将我们带入一个万物感知、万物互联、万物智能的智能世界。大学生在这个日益迅速进步的时代中,也需要时刻保持学习的心态,才能不落伍于时代,跟上...
- “数”中自有黄金屋 “数”中自有黄金屋
推荐直播
-
OpenHarmony应用开发之网络数据请求与数据解析
2025/01/16 周四 19:00-20:30
华为开发者布道师、南京师范大学泰州学院副教授,硕士研究生导师,开放原子教育银牌认证讲师
科技浪潮中,鸿蒙生态强势崛起,OpenHarmony开启智能终端无限可能。当下,其原生应用开发适配潜力巨大,终端设备已广泛融入生活各场景,从家居到办公、穿戴至车载。 现在,机会敲门!我们的直播聚焦OpenHarmony关键的网络数据请求与解析,抛开晦涩理论,用真实案例带你掌握数据访问接口,轻松应对复杂网络请求、精准解析Json与Xml数据。参与直播,为开发鸿蒙App夯实基础,抢占科技新高地,别错过!
回顾中 -
Ascend C高层API设计原理与实现系列
2025/01/17 周五 15:30-17:00
Ascend C 技术专家
以LayerNorm算子开发为例,讲解开箱即用的Ascend C高层API
回顾中
热门标签