-
11月30日,华为云发布云原生产业白皮书、云原生2.0全景图和行动计划,华为云CTO张宇昕表示:“新云原生企业既需要让新生能力生于云、长于云,把AI、大数据、边缘计算、视频等新生能力用于企业,同时也需要继承和发展既有能力,并与新生能力立而不破、有机协同。云原生2.0,让每一个企业都能成为新云原生企业。”华为云产品副总裁方国伟介绍了华为云云原生2.0全景图,为赋能新云原生企业智能升级,实现“资源高效、应用敏捷、业务智能、安全可信”,华为云原生基础设施全面升级,让云原生成为企业应用内生的能力。在业务智能方面,华为云通过FusionInsight云原生智能数据湖构建数据使能的坚实技术底座,助力企业把数据资源加工为数据资产,结合AI能力加速企业智能升级。随着大数据、5G、AI、物联网的飞速发展,数据的规模及种类急速激增,使得产业不断的变革,给业务带来机遇的同时,也在技术上提出了更高的要求,如数据的采集、存储、交互式查询、批流处理、融合分析等。而传统大数据平台在应对这些变化时,将面临如下问题:l 传统大数据通过虚机进行部署,但虚机的性能存在一定比例的损耗,当物理机资源的使用率越高,虚机的性能损耗则越大,性能损耗最高超过30%;l 传统存算一体解决方案在进行数据备份时,均采用1:3副本,使得存储资源的利用率仅为33%,造成存储成本居高不下;l 传统大数据平台虽有Hive MetaStore进行元数据的管理,但其缺乏统一的数据视图,数据在湖内分布散,管理复杂,流动性差,造成找数难的问题;l 传统大数据平台采用T+1批量入湖的方式,在进行数据分析时需频繁搬迁数据,且分析链路长,均以事后报表为主,造成数据分析慢的问题;l 传统大数据平台中各业务系统自建,数据分布散,易形成数据孤岛;伴随业务的增长,数据类型激增,存在组件多,数据格式不统一等问题,当进行协同分析计算时,数据需频繁搬迁,产生大量数据冗余,且各计算引擎开发语言不同,进行二次开发的技术门槛高。针对以上问题,华为云FusionInsight云原生智能数据湖为政企客户提供湖仓一体、云原生的大数据解决方案,主要包含MRS大数据、DWS数据仓库、CSS云搜索、GES图引擎、DLI数据湖探索等云服务,一站式解决分析域数据问题,让企业新生云原生能力生于云、长于云,并能和既有能力有机协同、立而不破,释放海量数据价值,助力政企客户实现一企一湖、一城一湖!具体来看,华为云FusionInsight智能数据湖具备五大云原生能力:l 针对虚机部署的问题,华为云FusionInsight采用裸金属部署方式,实现资源弹性,做到分钟级的裸金属服务器发放。同时,华为云FusionInsight具备独家的SDI技术,拥有超低时延;基于擎天加速卡,可做到100%释放完整算力,实现性能零损耗,高性能表现持续在线;l 针对传统存算一体化方案,华为云FusionInsight提供OBS云存储的存算分离方案,计算与存储资源按需灵活扩容,避免资源浪费,采用企业级EC替换3副本的备份机制,最低1.2副本,存储利用率从33%提升至80%+,使得整体TCO降低20%+,让每比特数据价值更优;l 通过DLC(Data Lake Catalog)统一全局数据视图,让元数据全局可见,同时,DLC还兼容Hive MetaStore但性能超越其3~5倍,在保持高性能的前提下,实现数据的全局可视可用;l 通过实时数仓,可T+0实时增量更新同步,批流合一分析;实现贴源数据实时多维分析,缩短分析链路,提高分析效率,实现PB级数据毫秒级响应;l 通过HetuEngine实现跨源跨域分析,打破MRS与DWS间的数据墙,协同计算,消除数据孤岛,免数据搬迁,让协同分析由数天降至数分钟;同时,HetuEngine支持多引擎融合,传统大数据在进行多引擎组件开发时,需涉及到不同组件的开发语言, HetuEngine统一SQL接口访问大数据,降低用数门槛,让华为云FusionInsight的云服务(MRS、DWS、GES、CSS、AI)使用更高效,让大数据越用越简单。基于存算分离架构构建的华为云FusionInsight云原生智能数据湖除了上述五大云原生能力外,还支持与AI的对接,基于统一的元数据,数据全局可视,大数据的工程师、科学家等角色可通过SQL的脚本,把数据通过AI的算法获取自己想要的结果,感受极致的智能体验。目前,华为云FusionInsight云原生智能数据湖已广泛应用于政府、金融、运营商、大企业、互联网等行业,携手800+合作伙伴,服务于全球60+国家和地区3000+政企客户。更多内容,华为云FusionInsight系列文章:https://bbs.huaweicloud.com/forum/thread-66105-1-1.html
-
在数据驱动的未来,大数据人才的需求会越来越大。而现在仅仅是大数据起步的进阶阶段,现在入行正是恰逢其时。中国互联网行业正处于一个新的飞速发展时期,对人才的需求也在同步急剧增长。现在华为云推出2021年度开年之作——华为云【大数据全栈成长计划】核心技术赋能,构建大数据技能体系免费报名!和好友一起还送“豪礼”更有MatePad任性拿还可以免费获得Linux基础、Java基础两门课程快快点击下方链接报名参加吧,课程内容丰富多彩,值得收藏!活动报名入口: 点此立即报名
-
日前,由奥地利VRVis虚拟现实可视计算技术研究中心、奥地利CKM工业集团有限公司、江西维尔科宝虚拟现实科技有限公司、维尔科宝(天津)科技有限公司共同承办的2020世界VR产业大会云峰会奥地利分会场活动在奥地利维也纳举行。2020世界VR产业大会契合当前国内外发展大势,首次在国外设立分会场,本论坛以“虚拟引领现实,可视描绘未来”为主题,通过录播的形式在大会主会场播出。奥地利基于国家发展战略,从20年前就已开始集中国家力量进行虚拟现实可视计算技术产业化应用的研究,如大脑神经网络计算、大规模基础设施三维重构、大数据可视互动分析的工程应用、城市灾害应急防御、航空航天、智慧城市应用等。其中,可视计算技术除涵盖虚拟现实技术外,还包含大数据可视化、大数据可视互动分析技术、计算机图形识别技术等,其产业化应用领域和内容更加广阔和丰富,将赋予虚拟现实更多的产业化内容和应用解决方案,是数字中国、智能制造及智慧城市建设中大数据优化分析解决方案的唯一求解工具。正如中国驻奥地利特命全权大使李晓驷介绍的,基于此次大会,中奥科技交流的深度和广度将更上一个台阶,在先进制造、信息技术、人工智能、航空航天、节能环保、医疗卫生等领域积极展开了形式多样的交流,互利共赢、共同发展。专家观点奥地利VRVis虚拟现实可视计算技术研究中心资深研究员玛丽亚·莉玛·梅德罗斯:可视计算在汽车工业设计中大有可为虚拟现实和可视化计算在汽车工业设计中大有裨益,开发者能够更好地利用这些技术进行汽车电机和发动机的开发测试和模拟,客户也可以通过虚拟现实技术更好地定制产品。在汽车工业制造中会应用虚拟现实技术的扩展包(与3D模拟结果交互和可视的VR应用);在汽车工业仿真中,我们会针对这种可视计算结果和虚拟现实扩展包的详细结果进行分析。一方面,虚拟现实技术有助于设计者勘误设计环节的错误环节;另一方面,针对建模规律加以分析,能更好地理解物理效果并解释模拟结果。奥地利VRVis虚拟现实可视计算技术研究中心资深研究员托马斯·奥特纳:三维可视化建模助力火星探测在航天行星的研究工作中,相机是研究工作中至关重要的工具。交互式3D可视化工具可以让科学家利用高分辨率3D技术充分了解火星表面的物质。通过相机输出的图像,再利用三维曲面技术,科学家能高度还原物质上的几何纹理,分析出详细的参数,还可以任意缩放。目前中国、美国等国家都已经开启了火星探测工程,寻找火星上的生命。在此过程中,虚拟现实、3D可视工具将帮助科学家精准考察和监测,导出复杂的三维图像,助力研究顺利进行。奥地利VRVis虚拟现实可视计算技术研究中心资深研究员丹尼尔·科讷尔:VR帮助建立智能灾难管理系统洪水、雨水防控的智慧化管理,为城市科学决策提供技术支持。其中,成功决策的关键在于预测和探索替代方案的能力。为了降低水灾对城市的侵害,我们需要通过模拟来预测灾害将在哪里发生。预测到灾难发生后需要在系统中模拟防控预案,建立各种模型,如建立模拟墙体、模拟堤坝和蓄水池。在模拟方案中,我们可以准确地看到防洪墙对洪水治理的作用,并可以任意“拆除”更换其他方案。奥地利VRVis虚拟现实可视计算技术研究中心资深研究员克里斯·特拉斯乐:数字孪生让建筑管理更智能数字孪生是可用于城市管理决策的无形资产,可大幅提高决策和管理过程中的精度。对于建筑项目或城市大规模管理规划,数据3D可视化利用了物理模型、传感器和历史数据,反映出相对应的实体装备的建设周期,该技术目前在许多欧洲建筑工程项目中得以成功应用。维也纳自然资源大学教授阿尔弗雷德·皮特勒、奥地利CMK工业集团有限公司董事长习国燕:VR是保障高质量生活的关键手段产业中的许多专家都在讨论VR模型技术,而城市是我们最大的产业,城市的管理需要经验,而经验依靠的是海量数据信息,海量数据信息都需要处理。例如在地理信息系统平台上,由一个软件驱动来处理这些数据,整理出有用的信息。这一庞杂的过程,需要通过VR模型显示出来,并计算产品的价值。挪威工程院院士、IEEE计算机协会区块链委员会主席容淳铭:5G、AI和区块链重构工业互联网服务未来的工业数字化,将依赖5G、AI等信息技术的推动,形成新平台、新模式、新生态和新产业。在工业制造领域,人工智能扮演的是生产力的角色,区块链扮演的是调节生产关系的角色,大数据则是生产资料。大数据获取的数据信息,通过区块链的激励模式和分配原则作用于人工智能,让人工智能触及这些数据,进而发挥全面的带动作用,这些技术的联动打造出一个全新的工业互联网服务体系。粒界科技创始人兼CEO、图形学会工业主席吴小毛:计算机图形学为影视娱乐注入新活力计算机图形学对于大众来说,是一个十分冷门的词汇,实际上早在数字产业发展的初期,计算机图形学就已经进入了人们的生活。无论是用于夯实人类精神文明生活的影视及游戏产业,还是服务于城市管理的智能控制系统,计算机图形学都是中流砥柱般的存在。5G、AI与云计算的技术发展,为图形学注入了新的生机。在图形渲染引擎中,利用AI、大数据等新一代信息技术,将专业化的操作“化繁为简”,让AI在引擎中完成“专业操作”,辅助普通用户完成动画、建模甚至特效等工作。来源:中国电子报、电子信息产业网 齐旭
-
Kunpeng BoostKit应用使能套件,围绕大数据、分布式存储、数据库、虚拟化等八大主流场景,开放高性能开源组件、加速软件包和工具/参考实现,使能应用最优性能。本期介绍大数据场景下应用使能相关文档资源的获取与使用。软件兼容性查询:cid:link_2鲲鹏BoostKit大数据使能套件介绍 在线课程:cid:link_0鲲鹏BoostKit大数据使能套件 文档聚合:cid:link_1
-
【大数据全栈成长计划】已上线报名现已开启>>>>>>>点击此处了解详情当然我们一定不会只有学习课程这么简单我们准备了“带着好友一起学习,一起进步,一起“赢好礼””的超大惊喜活动时间:即日起至2021年3月全阶段课程更新结束止具体操作流程如下:步骤一:邀请人成功报名大数据全栈成长计划后(点击去报名),点击图示中的“分享有礼”按钮丰厚奖品等你来拿赶紧邀请小伙伴快来参与吧!!!
-
【大数据全栈成长计划】已上线报名现已开启>>>>>>>点击此处了解详情当然我们一定不会只有学习课程这么简单我们准备了“带着好友一起学习,一起进步,一起“赢好礼””的超大惊喜01. 活动详情 -邀请活动时间:即日起至2021年3月全阶段课程更新结束止-邀请行为:本人成功报名后,点击分享有礼,选择一种方式邀请好友成功报名即可。
-
【大数据全栈成长计划】已上线报名现已开启>>>>>>>点击此处了解详情当然我们一定不会只有学习课程这么简单我们准备了“带着好友一起学习,一起进步,一起“赢好礼”的超大惊喜01. 活动详情 -邀请活动时间:即日起至2021年4月全阶段课程更新结束止-邀请行为:本人成功报名后,点击分享有礼,选择一种方式邀请好友成功报名即可。具体操作流程如下:步骤一:邀请人成功报名大数据全栈成长计划后(点击去报名),点击图示中的“分享有礼”按钮步骤二:通过生成的专属链接/邀请二维码,即可邀请好友报名活动三、有效邀请的定义(邀请的好友):所有被邀请人员需满足以下条件才可算成功邀请,纳入奖励数量:拥有华为云账号,并完成实名认证邀请人在参与过程中有学习任务打卡动作(完成随堂测验,学习笔记、问答官排位赛或考核任一项任务并取得积分)邀请好友参与【大数据全栈成长计划】活动即有机会赢取华为5G手机,华为手环,华为无线耳机和华为移动电源不要忘记的PS:参与邀请活动需自己先实名02. 奖励等级及奖品 ◎分享邀请人数第1名(通过邀请链接报名≥100人)( 人数相同时,以最先到达的为准)华为畅享20 6GB+128GB 5G手机◎分享邀请人数第2-3名(通过邀请链接报名≥80人)( 人数相同时,以最先到达的为准)即得华为手环 B6 运动版◎分享邀请人数第4-10名(通过邀请链接报名≥50人)( 人数相同时,以最先到达的为准)即得HUAWEI FreeBuds 悦享版 无线耳机◎分享邀请人数第11-30名(通过邀请链接报名≥30人)( 人数相同时,以最先到达的为准)即得华为快充移动电源 20000mAh◎所有邀请人和被邀请人报名参与活动,即可获得 300 码豆数量和名额都很有限,先到先得!谁快谁先享豪礼哦~抓紧动起来!03. 活动规则 · 活动从即日起至2021年4月全阶段课程更新结束止,此外时间内邀请人数不算有效邀请· 专属链接/二维码禁止在本期课程学习群内露出,如发现群内露出将取消活动邀请资格· 参与活动需获取专属链接,专属链接需大家按照上述活动步骤自行获取,然后在本帖下方回复您的链接,否则视为放弃获奖资格!· 活动结束后10个工作日内公布详细结果,公示期5个工作日,公示期结束开始兑奖· 请勿使用论坛私聊或类似功能骚扰其它华为云用户,违者直接取消活动资格· 如遇奖品库存不足会进行同价位奖品调换,介意者谨慎参与活动· 如发现使用他人身份恶意重复报名活动,或采取机器批量注册/虚拟手机号注册/购买账号等恶意注册行为进行违规行为,华为云AI社区有权取消相应人员的活动参与权利,并收回相关奖励· 本次活动所有回帖内容需满足华为云论坛发帖规范:https://bbs.huaweicloud.com/forum/thread-23077-1-1.html· 本邀请活动最终解释权归华为云开发者社区所有
-
在数据驱动的未来,大数据人才的需求会越来越大。而现在仅仅是大数据起步的进阶阶段,现在入行正是恰逢其时。中国互联网行业正处于一个新的飞速发展时期,对人才的需求也在同步急剧增长。现在华为云推出2021年度开年之作——华为云【大数据全栈成长计划】核心技术赋能,构建大数据技能体系免费报名!和好友一起还送“豪礼”更有华为5G手机任性拿还可以免费获得Linux基础、Java基础两门课程 01.活动介绍&适合人群 ▶课程时间:第一阶段:2020年12月14日-2021年1月17日第二阶段:2021年1月18日-2021年3月6日第三阶段:2021年3月8日-4月11日▶适合人群:大数据方向开发者、跨技术栈开发者▶课程亮点:亮点1:为了让大家拥有更专业的指导,特意邀请了华为金牌讲师华为金牌讲师授课,丰富大数据开发经验,直播点评+论坛/社群答疑,专家引导少走弯路亮点2:报名即送Linux、Java基础课程,为你的提升打好基础报名课程即可马上获取Linux、Java基础课程,夯实基础,提升更快。亮点3:和好友一起学习,得“豪”豪礼,一起进步还有奖品邀请好友一起报名学习本次课程,就有机会得到实物奖品!一起学习,共享成果!亮点4:现在报名就送500码豆,打卡即有平板、智能手表等实物奖励免费报名!免费报名!免费报名!现在完成课程报名送300码豆,码豆数量有限先到先得完成对应学习任务,累计排名达标也有奖品哦~ 02.活动参与流程 ▶报名活动&课程列表:- 活动报名入口(报名活动才能参加积分排名): 点此报名活动- 大数据第一阶段:大数据入门篇: 点此查看课程- 大数据第二阶段:Hadoop学习篇:点此查看课程- 大数据第三阶段:Spark学习篇:点此查看课程▶加入学习社群:有小助手随时随地更新最新课程/学习动态,有同类别的开发者一起分享学习心得和排忧解惑,更有华为云专家不定时空降和大家聊聊课程最IN进度!你还不来么?扫描下方二维码,回复:大数据+姓名,加入学习群吧~ 03.课程安排&学习任务 (积分活动已结束,课程仍可以继续学习)一、第三阶段课程安排:二、学习任务&附加奖励:第三阶段学习任务序号阶段任务详情活动积分奖励附加奖励提交入口1每章随堂测试任务完成方式:在随堂测试打卡帖中,回复对应章节的随堂 回复格式:华为云ID+截图(露出右上角华为云ID,且有效回复次数≥1)2分 /每有效打卡/每章节每周在本周内提交随堂测试的用户中,抽取1名幸运奖励华为云定制鼠标*1点击前往2每周学习笔记分享任务完成方式:在学习笔记征集帖中,回复本周课程内容的学习笔记 回复格式:华为云ID+笔记内容(字数≥200字)2分 /每有效打卡/每周每周在本周内提交学习笔记的用户中,抽取1名幸运奖励华为云定制鼠标*1点击前往3大数据相关文章征集任务完成方式:本学习阶段任意时间内,在“华为云-博客”,发表与大数据开发的任意原创博客内容,将文章链接回复到指定帖内 回复格式:华为云ID+博客文章链接(字数≥600字)10积分 /每篇有效心得/每阶段 最高20/每阶段每阶段选取1篇最佳博文,奖励机械键盘*1点击前往4问答官排位赛任务完成方式:用户可在相关活动帖中发布自己学习大数据技术中的疑惑或实践问题,其他用户可参与回答。由专家评审,同一问题下确定一名最佳答案。回复格式:华为云ID+提问的问题/解答答案5积分/每有效问题(最高10分)2积分/每有答复(最高4分)最终会全部每阶段参与互动的用户中 抽取3位幸运奖奖励旅行本套装*1点击前往5阶段考核任务任务完成方式:本阶段课程结束后,发布考核任务,按提示完成按照考核分数积分积分奖励、结业证书点击前往 03.活动奖励 本次活动不仅免费跟大牛学习技术,更有积分大礼等着大家~每次有效提交的学习任务都会得到对应积分,累计积分最高者即可获得路由器,等智能硬件,还有华为云定制机械键盘、背包等你拿!点击了解大数据全栈课程专属福利 04.邀请好友有礼邀请好友参与【大数据全栈成长计划】活动即有机会赢取华为5G手机,华为手环,华为无线耳机和华为移动电源了解邀请活动详情请点击这里◎分享邀请人数第1名(通过邀请链接报名≥100人)( 人数相同时,以最先到达的为准)华为畅享20 6GB+128GB 5G手机◎分享邀请人数第2-3名(通过邀请链接报名≥80人)( 人数相同时,以最先到达的为准)即得华为手环 B6 运动版◎分享邀请人数第4-10名(通过邀请链接报名≥50人)( 人数相同时,以最先到达的为准)即得HUAWEI FreeBuds 悦享版 无线耳机◎分享邀请人数第11-30名(通过邀请链接报名≥30人)( 人数相同时,以最先到达的为准)即得华为快充移动电源 20000mAh◎所有邀请人和被邀请人报名参与活动,即可获得 300 码豆数量和名额都很有限,先到先得!谁快谁先享豪礼哦~抓紧动起来!了解邀请活动详情请点击这里 05.活动注意事项 ○所有活动奖品将在活动结束后15个工作日内完成发放;○活动奖品颜色、型号随机,且部分奖品数量有限发完即止,,若有缺货或其他情况将替换为同价值的其他奖品;○本次活动回帖内容需满足华为云论坛发帖规范:https://bbs.huaweicloud.com/forum/thread-23077-1-1.html○码豆奖励活动规则:1)码豆可在DevCloud会员中心兑换实物礼品;2)码豆奖励将于活动结束后的3个工作日内充值到账,请到会员中心的“查看明细”中查看到账情况;3)码豆只能用于会员中心的礼品兑换,不得转让,具体规则请到会员中心阅读“码豆规则”;4)为保证码豆成功发放,请先登录一次会员中心。会员中心入口:https://devcloud.huaweicloud.com/bonususer/home○活动期间请勿更改昵称华为云ID等信息,如出现无法发放码豆视的情况为自愿放弃。
-
华为云10款大数据爆品4折钜惠,低价狂欢不容错过! 数据仓库服务GaussDB(DWS):4折,适用于BI分析、数据分析即时呈现场景。 云搜索服务:5折,适用于站内搜索、TB级数据毫秒级返回搜索结果场景。 MapReduce服务:5折,适用于IoT数据处理、一键安装场景,业务不中断。 数据湖探索、数据可视化:5折,适用于数据大屏解决方案,无忧运维,开箱即用。 100元ModelArts神券限量送,消费满额还送华为Mate40,下单即有机会抽取华为电脑MateBook X Pro。 立即抢购,请点击 人工智能+大数据专场>>
-
摘要:一个统一的现代化的数据基建需要三类架构来实践三种不同的应用场景。近期,美国知名科技企业风投机构A16Z总结出一套通用的技术架构服务,分为以下三种场景。一、数据基建架构全景数据流向显示,左侧的数据源经数据处理(批量、实时流、事件流等)将数据统一汇聚到数据湖或数仓中,通过数据科学或机器学习进行AI分析,通过AD Hoc和实时分析为客户或APP提供敏捷的结果数据。华为云FusionInsight为政企客户提供一站式全场景的云原生数据湖,围绕政企客户在采存算管用等数据全生命周期提供领先的整体解决方案,方案主要包含MRS大数据、DWS数据仓库、一站式数据治理中心等云服务,助力政企客户释放海量数据价值!其架构如下:上千个大型客户已经基于FusionInsight架构构建其大数据应用平台。A16Z经过调查相关业内人士得出一个结论:一个统一的现代化的数据基建需要三类架构来实践三种不同的应用场景。现代化 BI 架构多模式数据处理架构人工智能和机器学习架构1.现代化 BI 架构这是对小型数据团队和预算有限的企业的默认选项,企业逐渐从传统数仓迁移到这个架构,利用云的灵活度和可扩展性。应用场景包含:报表,仪表盘,自助式分析,主要使用SQL来分析结构化数据。优势:前期投入低,启动快,市场上人才储备充分。缺陷:对于数据场景复杂的团队不适用,比如需要数据科学,机器学习,或者实时场景。传统的小型数据团队其面对的数据基本以核心交易系统的RDBMS结构化数据为主,数据量在GB级,普通的数仓都可支持其数据的分析挖掘,无需大数据支撑就可完成,这种处理方式在2008年时的大型企业中也较为常见,其数据量较小基本上使用数仓就可完成日常的数据大屏、数据分析等工作。这是对小型数据团队和预算有限的企业的默认选项,利用云的灵活度和可扩展性,企业逐渐从传统数仓迁移到这个架构。华为云FusionInsight可提供企业级数仓,DWS目前服务于全球1000+大型客户,广泛应用于政府、金融、运营商、大企业等领域。产品始于2011年,经历将近10年技术积累,已取得180+国内外授权专利。DWS可支撑日常的结构化数据分析,其具有如下特点:大规模:GaussDB(DWS)基于分布式架构,在保证ACID的基础下,突破大规模分布式场景下集群通信(Multi-Streams)、逻辑集群(Multi-Groups)技术,具备2048节点扩展能力。值得一提的是,逻辑集群可将ODS、数据仓库、数据集市、自助分析等不同业务负载,有机的统一起来,有效隔离、有效共享。高性能:GaussDB(DWS)具备多层级全并行计算引擎。支持多个物理节点并行计算,在一个物理节点内部,支持多个CPU核心并行计算,在一个CPU核心的指令序列中,支持SIMD指令,实现一个指令同时操作多条数据。将并行能力发挥到极致,为业务提供极致的性能。另外,Multi-Cores技术使得在鲲鹏上性能相比同代x86芯片提升30%以上。高可靠:GaussDB(DWS)具备多层级容灾能力,在AZ、集群、节点及进程出现软硬件异常的情况下能够平滑处理。另外,Server端Multi-Retries技术大幅减少故障失败的业务感知;其次,在棘手的亚健康问题上,GaussDB(DWS)也有完善的检测和处理机制;最后,离线扩容、半在线扩容、在线扩容技术能够从容应对客户不同的扩容需求。华为云DWS数据仓库技术核心是分布式架构,过去十年一直围绕分布式构筑竞争力。未来,GaussDB(DWS) 数据仓库将基于分布式架构持续演进,围绕云、大数据、5G/IoT、人工智能,构筑下一代开放的、全场景分析型数据库。2.多模式数据处理架构这个架构通常用于大型企业和科技公司,用来满足复杂的数据需求场景。应用场景包括:BI及高级功能,包括AI/ML,低延时分析,大规模数据转换,多类型的数据处理(文字,图像和视频)使用各种语言(JAVA/SCALA,Python和SQL)优势:能灵活的支持各种应用,工具和UDF和部署环境。在大规模数据集上的成本优势。缺陷:不适合小型数据团队,维护这套架构需要较多的时间,费用和专家资源投入。在现实世界中,需求侧觉醒的同时,在平行的赛博世界中,技术的进化也一直在持续。自从2006年Apache Hadoop架构发布以来,到2011年,企业逐渐采用Hadoop架构演进出来的开源或商用大数据软件,开启了离线计算时代;2012年,以Spark等为核心的流式计算开启了实时计算时代,在线分析和实时计算的场景也开始逐渐应用,但这一阶段的使用者主要是开发人员;2013年至今,随着数据的激增,大数据平台演进成了融合大数据平台,而随着AI等技术的突飞猛进,从数据分析到数据挖掘,大数据平台向着智能化进行演进。权威调研机构IDC表示,“数字化时代下的竞争正在加速,市场参与者要么通过数字化转型成为领头企业形成规模化优势,要么将逐渐被市场淘汰”。随着5G、AI、IoT等技术的迅猛发展,到2025年,全球数据量将从2018年的33ZB快速增长到180ZB,全球数字经济总量将达25万亿,CEO也越来越重视,参与度高达67%,数字化技术让投资回报率达到6.7倍,政企数字化进程为64%。综上可知,数字化转型是政企充分释放复杂场景用数需求的必经之路。数字底座如此关键,那么大数据作为主要承载技术,自然是其重中之重。华为云FusionInsight提供MRS数据湖服务,让政企客户在一个大、快、融、稳的云原生数据湖架构下持续演进:1)大:支持最大2万+节点大规模集群,可集群联邦无限扩容;2)快:可T+0实时增量更新同步,可毫秒级高效实时OLAP,缩短分析链路,实现实时数据湖;3)融:通过HetuEngine打破多引擎、多源、跨地域的限制,消除数据孤岛,统一SQL接口融合分析,简化用数,全民BI;4)稳:支持在线滚动升级,无需拆集群、搬应用,使客户一个架构持续演进,十年无忧!5)云原生数据湖:通过统一元数据,让数据全局可视;通过存算分离的企业级EC,降低TCO。华为云大数据,自2008 年开始投入研究,最早于2014年推出商用产品,秉承开源开放的心态,践行“平台+生态”战略,华为云踩对了历史的进程,围绕政企大数据全生命周期,华为云FusionInsight是一个技术领先的云原生智能数据湖,是华为云三大使能之数据使能方案的坚实数据底座。3. 人工智能和机器学习架构应用机器学习的公司已经在使用这套架构的一部分技术。深度使用机器学习的企业会部署整套架构,甚至自研新的工具。场景:数据驱动的内外部应用程序,场景有实时的或批处理的。优势:完全掌控整体的开发过程,将机器学习打造为企业核心且长期的能力。缺陷:不适合尚在探索机器学习,只为小范围的内部应用场景。大规模应用机器学习仍是当前最大的数据挑战华为云ModelArts为政企客户提供一站式的AI训练和推理平台,其具有如下特点:支持AI全栈、全流程、全场景开发训练支持资源统一管理、统一池化调度支持业界主流引擎和自研引擎,实现零成本迁移提供多维度功能特性,满足各类用户在近日发布的《IDC MarketScape: 中国大数据管理平台厂商评估,2020》(以下简称IDC大数据报告)报告中,对中国主流大数据厂商从能力、战略、市场份额三个维度进行了全面评估,华为云位居领导者象限领先位置,并在技术实力和市场份额两大维度双领先在技术上持续创新打磨之外,华为云FusionInsight也是“最懂行”的大数据解决方案:在政府领域,国内50%的智慧城市都有华为云FusionInsight的孜孜不倦的身影,华为云大数据已支撑多个部委和各省市地区建设“大数据+政务”。在某市,华为云FusionInsight联合伙伴建成“一云二网三平台”,在统一的政务数据逻辑模型的指导下,针对民生、产业、政府的“痛点”和“难点”,从构建城市数据资源库为开端,以大数据分析支撑政府智慧决策,以建设智慧应用为抓手,打破信息孤岛,实现信息资源交换共享,在 “数聚惠民”、“数聚兴业”、“数聚善政”三大方面,发挥大数据的威力,支撑 “一号、一窗、一网” 政务服务,让简政放权、百姓办业务“最多跑一次”成为现实。在金融领域,国内50%的TOP20金融客户(含银行、证券、保险等)均已使用华为云FusionInsight构建其大数据平台。某行使用华为云FusionInsight构建大数据基础平台,支撑了银行企业级数据湖、数据仓库、集团信息库为核心的“一湖两库”建设,承载了总行及各支行业务系统,支撑日常银行BI、AI、数据挖掘、数据分析等,实现了一份数据全局可用,免除数据搬迁,提升协同效率10倍,存储周期提升2倍,资源利用率最大可达90%,加速银行数字化转型进程。在运营商领域,国内三大运营商均使用华为云FusionInsight构建其大数据平台。广东移动基于华为云FusionInsight,联合政企客户共同打造智慧电网、智慧交通、智慧港口、高清视频等系列标杆应用,打通数据全生命周期链路,实现对内业务支撑、对外应用赋能,全面支撑了各类政务、民生等大数据应用服务。在交通领域,深圳地铁在6、10号线采用华为云FusionInsight构建大数据分析平台,打造领先的5G+大数据方案,并构建其数据资产中心和运行监控中心,承载地铁各业务系统,支撑设备健康、能耗管理、客流统计、线路中心级监控、应急决策和图像型火灾分析等线路级数据分析,数据分析效率从周级缩短至分钟级,实现高效运营,推动深圳步入更美好的全联接数字化轨道交通新时代…除过在以上各行业的应用,在环境保护方面,青海绿能数据有限公司基于华为云FusionInsight构建了国内首个能源大数据创新平台,实现了规划辅助决策、用气象数据科学指导发电等创新业务,为上下游产业链企业提供25类47项数据服务,推动28座新能源场站实现了“无人值班、少人值守”,并有效支撑了青海“绿电15日”,以大数据为基石,建设绿色新青海,守护高原和谐生态。同时,华为坚持“自己的降落伞自己先跳”,华为集团IT通过FusionInsight构建OneData大数据集群,实现大数据平台在大规模场景下的开拓,OneData集群其规模已至1万+节点;同时,实现了统一的数据管理服务,在菩提海UniDB产品中,通过逻辑统一方式,把50+物理分散的计算集群(Hadoop+MPP),基于五统一(数据安全,元数据目录,数据集成,数据访问,任务调度),整合成湖仓一体的架构,支撑上千个企业租户的PB级数据分析处理需求。一个基于FusionInsight MRS+DWS 的“+治理,+AI,+运营,+云”的融合数据底座(菩提海)已经在华为集团IT广泛使用,未来可期。以上只是“冰山的一角”,华为云FusionInsight一方面不断深入理解客户不断发展的业务诉求,另一方面,持续技术创新并引领行业发展,商业诉求+技术创新双轮驱动行业可持续、高质量发展,“用数”助力客户商业成功!上面的论述已经充分证明,华为云是“懂行”的大数据领导者,真正让客户用好数、管好数、放心用。据了解,截至2020 年10月底,华为云FusionInsight 智能数据湖已服务60+个国家和地区,3,000+客户,覆盖政府、金融、运营商、电力、传媒、医疗、教育、交通、油气、物流、零售、制造、互联网等行业。
-
"华为&泰克产教融合实训云平台为“云计算&大数据实习实训”提供了完整的实训环境,补足了以往传统实训室的短板,有效提升了学生的动手实践能力,对学生未来的职业发展奠定坚实的基础。"—— 信息技术新工科产学研联盟副秘书长 计卫星 一、背景与挑战北京理工大学,由中华人民共和国工业和信息化部直属,中央直管副部级建制,是新中国成立以来国家历批次重点建设的高校,首批进入国家“211工程”和“985工程”,首批进入世界一流大学建设高校A类行列;京港大学联盟、中俄工科大学联盟、卓越大学联盟成员;入选111计划、2011计划、卓越工程师教育培养计划、国家级大学生创新创业训练计划、国家级新工科研究与实践项目、国家大学生创新性实验计划、国家建设高水平大学公派研究生项目、中国政府奖学金来华留学生接收院校、全国深化创新创业教育改革示范高校,设有研究生院。是一所以理工科为主干,工、理、管、经、文、法、艺等学科协调发展的全国重点大学,被誉为“红色国防工程师的摇篮”。 二、客户痛点 为积极响应新工科人才培养的号召,北京理工大学、新工科联盟、华为和泰克教育集团联合打造的全国首个新工科创新人才基地于2018年9月在北京落成。由产教融合实践云平台提供技术支撑,聚焦云计算、大数据、人工智能等创新人才培养,是建设数字中国、把握信息化发展机遇,真正将产学研无缝衔接的重要举措,对ICT人才生态的建设具有标杆意义。 新工科人才培养基地揭牌仪式 基地参观交流 三、解决方案 1、创建云计算、大数据等实践环境不需繁琐的环境搭建和清理,一键接入实验环境,随时记录实践进程并自动生成实验报告。在实验过程中,学生通过智能问答快捷掌握常用知识点,遇到疑难问题还可以和老师及专家远程操作互动。最后,负责实训的老师可以通过可视化的管理界面随时了解学生实践进程,方便查阅根据具体操作自动生成的最真实、翔实的实训报告。2、该平台可满足200名师生同时进行云计算、大数据、人工智能、数据安全等学科专业的实践实训。3、大大的解决了教学环境的普通局限性,打破了ICT行业的教学瓶颈,实现灵活、快捷、安全省钱的实践模式,可以培养出更多与市场需求高度契合的专业人才。 四、客户价值 1、打破以往实训模式化严重、学生参与度低的问题,是虚实结合的“理论+实践”教育解决方案典型示范!2、教学科研智能化、管理数据可视化、产业资源集成化,大大提高教学工作效率与实践培养质量。3、打破了传统教学的实践瓶颈,实现灵活、快捷、安全、低成本的实践模式。案例中使用的商品:泰克双创实践云平台【华为云云市场,助您上云无忧】
-
“盛云猫,它是一款真正做到从我们装备制造企业的需求场景出发来设计的一款软件,他充分解决了我们售出设备运维管理难、售后服务管理难、配件销售难等一系列问题,提高了我们的售后服务效率和质量,减少了售后服务成本,同时还提高了配件的销售率。”——正业科技IT主管邹金一、背景与挑战广东正业科技股份有限公司创立于1997年,主要面向电子信息产业提供智能检测和智能制造整体解决方案等产品和服务,在电子信息产业领域被市场广泛认可,目前市场覆盖全球数十个国家和地区。但随着公司的不断发展,大量的设备管理及其售后服务工作也成为公司面临的新挑战,因此正业科技希望依托物联网、云计算等新技术,帮助正业科技实现设备的数字化运维、预测性维护、人性化售后,最终帮助正业科技实现从设备制造到服务型制造的转型。 二、客户痛点1、企业的售后服务方式还是被动式服务,售后服务部门每年都要花费大量的差旅成本,但又很难为企业带来利润收入;2、售后人员难以管控,售后服务的流程长、效率低下,客户满意度低;同时缺乏售后服务反馈机制,服务完成质量情况无法清晰得知;3、配件查找难,报价难,销售更难;设备资料碎片化,设备销售难;和客户之间存在鸿沟;4、设备信息管理混乱,设备BOM,图纸,手册,知识库缺乏统一管理,查找不方便,效率较低;5、设备运行、故障等数据统计报表主要是通过手工的方式进行统计,统计过程容易出错,统计效率较低; 6、通过传统沟通的方式(电话、邮件)沟通,效率较低,同时也缺乏有效记录与跟踪,响应时间长; 7、故障处理效率较低、知识/经验不能在线创建,共享,设备历史故障没有形成记录。 三、解决方案基于华为云的Iot平台及相关技术,为正业科技提供了一套成熟的工业IoT解决方案,充分解决了正业科技售出设备运维管理难、售后服务管理难、配件销售难等一系列问题,助力正业科技的售后服务迈上了智能化新台阶。 1、建立了正业科技和设备客户的在线沟通平台:设备用户可一键提交服务单或意见建议,帮助正业科技及时了解设备使用状况及设备用户反馈,帮助设计研发部门了解用户需求,改善产品质量,提升客户满意度; 2、建立检测设备的远程运维管理平台:实时采集监控设备使用情况,设备出现异常、故障,自动提醒服务中心对异常问题快速诊断,快速解决;设备出现故障,可做出预测性判断,主动服务,提醒终端用户进行设备维护检修; 3、建立了智能售后服务平台:利用物联网IOT+售后服务工单派单+配件管理,将售后服务变得更智能、更人性化,既提高了正业的售后服务质量及效率,同时也大大提升了客户的满意度;同时可通过过预测性维护,实现备件精准性营销,增加售后服务收入,增加客户粘性,同时也逐步实现了售后成本中心向利润中心的转变; 4、建立了设备信息全生命周期管理平台:实现正业设备信息的全生命周期管理,将设备的履历信息、设备配件、知识库等信息体系化、数字化管理,降低了对工程师的依赖,即使工程师离职,也不会导致部分知识的缺失;设备维护记录、知识手册、历史问题对策等资料都记录在线,可通过知识库查找快速为客户解决类似故障问题,大大提升了故障处理效率; 5、建立了产品商城平台:设备、配件实现在线化销售,将大量的线下沟通及流程工作实现在线化、便捷化,大大提升了装备制造商的配件销售额、设备销售效率,推动企业服务化转型升级。 四、客户价值1、服务效率提升:故障处理从客户反馈到维修处理需要1-7天不等,现在部分的问题压缩到1-2天内,部分故障处理效率提升了70%; 2、服务成本降低:原来大部分的问题都需要工程师去现场确认,现在可直接可通过远程诊断、远程维护即可,降低了人员的售后维护成本15%;3、客户满意度提升:利用物联网IOT+售后服务工单派单+配件管理的方式,大大提高售后服务质量和效率,从而也提升了客户满意度10%以上;4、配件销售率提升:利用在线商城,实现配件的在线化销售,提高了15%的配件销售;5、设备信息查找效率提升:通过设备信息全生命周期的体系化、数字化管理,大大提高了企业设备信息查找效率50%以上,也大大减少了对人员的依赖。 案例中使用的商品:盛原成工业IOT解决方案【华为云云市场,助您上云无忧】
-
近日,IDC发布《IDC MarketScape: 中国大数据管理平台厂商评估,2020》报告。该报告从能力、市场、战略三大维度对中国主流大数据厂商进行全面评估,报告显示华为云位居“领导者(Leaders)”象限,并在市场份额和技术实力两个维度双领先。可以看到,在IDC大数据报告中,有云服务厂商、传统ICT 厂商,以及大数据时代的创企等三类“玩家”。为何华为云能够脱颖而出?解读华为云FusionInsight智能数据湖五大硬核能力据了解,华为云FusionInsight智能数据湖五大硬核能力凸显了创新技术。硬核能力一:让政企客户在一个大、快、融、稳的数据湖架构下可持续演进!大:传统的大数据单集群扩容受限,往往扩容到2000节点就难以突破,华为云FusionInsight通过大集群突破扩展性瓶颈,支持最大2万+节点大集群,还可集群联邦无限扩容。此大规模特性已在华为内部获得了实践,华为云流程IT通过FusionInsight构建OneData大数据集群,其规模已至1万+节点,支撑各部门运营分析、即席查询等大数据分析,每日新增数据近100TB,10万张表,即席查询任务日均1万+,批处理作业每日10万+。华为流程IT OneData大集群历经两次滚动升级,业务0中断,已稳定运行六年。快:因数据量仍在不断指数级增长,人们对大数据高效处理的极致追求永无止境!传统大数据存在分析链路长,以T+1事后报表为主。华为云FusionInsight MRS可T+0实时增量更新和实时OLAP,让大数据越用越”快“!华为集团IT基于FusionInsight,实现了CDC+FLINK的实时集成方案,支撑了主干交易、财经、供应等交易数据的增量整合模型落地,相对于传统数仓的ETL+调度方案,数据供给效率提升了10倍。融:传统大数据分析面临类型多、分布散、协同难等问题;FusionInsight通过HetuEngine实现五大融合,统一SQL接口仅用简单的SQL就可操作PB级数据,全民BI,让大数据越用越简单。某行基于FusionInsight构建金融大数据,通过HetuEngine统一SQL接口,解决数据分散,组件多、语言多等难题,降低技术开发门槛,跨源跨域跨引擎融合分析,数据免搬迁,降低整体TCO。稳:FusionInsight可保障一企一湖连续性,在线滚动升级,业务永远在线,无需拆集群、搬应用,彻底解决传统大数据集群多、效率低、管理难、升级难等问题,让升级过程中关键业务不中断,确保业务连续性。某运营商使用FusionInsight搭建了大数据平台应对5G数据浪涌,先后两次滚动升级实现了大数据平台的平滑演进,实现业务无中断,升级无感知,用户体验持续在线,单集群规模已扩展至1500+节点,支撑了各类政务、旅游、精准扶贫等200+大数据应用服务,覆盖用户1.3亿+。硬核能力二:实时数据湖为了实现实时性,华为云FusionInsight提出了实时数据湖, 支持数据实时批量入湖、实时增量同步,全量数据供应效率T+0;可对贴源数据实时多维分析,缩短分析链路,提高分析效率,让数据价值近在眼前!硬核能力三:云原生数据湖近几年,云原生是云计算领域关键的技术创新,华为云在云原生领域也探索多年,通过Data Lake Catalog数据湖目录,为超大规模分析引擎提供统一元数据服务,让数据全局可视可得;在数据存储方面,通过OBS存算分离方案,实现计算、存储按需扩容,基于企业级EC实现最低1.2副本,总体TCO下降20%+,让数据每bit成本更优!。湖内提供交互式分析引擎,可无缝对接BI报表和自助分析,实现秒级用数,数据免搬迁;湖内统一SQL接口,降低技术开发门槛,简化用数,实现技术领先的云原生数据湖。硬核能力四:企业级数据仓库华为云FusionInsight为客户提供基于Shared-Nothing架构提供新一代开放的、全场景分析型数据仓库DWS,支持2048节点扩展能力;多层级全并行计算引擎,可调度海量的算力资源,通过高效的指令效率,实现数据导入和分析;具备多层级容灾能力,稳定可靠,离线、半在线、在线扩容技术,从容应对多种扩容场景。硬核能力五:一站式数据湖治理中心华为云FusionInsight为客户提供一站式数据湖治理中心,助力企业快速构建从数据接入到分析的E2E数据治理体系,统一数据标准,加速数据资产化。通过全域数据视图统一信息架构,统一数据标准;通过一站式全栈平台实现30+异构数据源的高效数据集成;拥有开放完备的安全体系,数据分级分类,统一安全认证。通过以上五大“硬核”能力的加持,华为云FusionInsight新一代的数据湖,让大数据越用越快、越用越易、越用越稳、越用越省!技术产品好不好,要用案例来说话事实上,华为云这种“稳定第一”的表现,在很多权威榜单中也有体现,例如连续四年上榜工信部中国大数据企业50强,连续三年入围Gartner Magic Quadrant for Data Management Solutions for Analytics,在中国区厂商排名第一。在技术受到权威机构认可的同时,华为云FusionInsight也是“最懂行”的大数据解决方案。截至 2020 年 6 月底,华为云大数据已服务了 60+个国家和地区、3000+客户,覆盖政府、金融、运营商、电力、医疗、制造、互联网等众多行业。在政府领域,国内50%的智慧城市都有华为云FusionInsight的孜孜不倦的身影,华为云大数据已支撑多个部委和各省市地区建设“大数据+政务”。在某市,华为云FusionInsight联合伙伴建成“一云二网三平台”,在统一的政务数据逻辑模型的指导下,针对民生、产业、政府的“痛点”和“难点”,从构建城市数据资源库为开端,以大数据分析支撑政府智慧决策,以建设智慧应用为抓手,打破信息孤岛,实现信息资源交换共享,在 “数聚惠民”、“数聚兴业”、“数聚善政”三大方面,发挥大数据的威力,支撑 “一号、一窗、一网” 政务服务,让简政放权、百姓办业务“最多跑一次”成为现实。在金融领域,国内50%的TOP20金融客户(含银行、证券、保险等)均已使用华为云FusionInsight构建其大数据平台。某行使用华为云FusionInsight构建大数据基础平台,支撑了银行企业级数据湖、数据仓库、集团信息库为核心的“一湖两库”建设,承载了总行及各支行业务系统,支撑日常银行BI、AI、数据挖掘、数据分析等,实现了一份数据全局可用,免除数据搬迁,提升协同效率10倍,存储周期提升2倍,资源利用率最大可达90%,加速银行数字化转型进程。在运营商领域,国内三大运营商均使用华为云FusionInsight构建其大数据平台。广东移动基于华为云FusionInsight,联合政企客户共同打造智慧电网、智慧交通、智慧港口、高清视频等系列标杆应用,打通数据全生命周期链路,实现对内业务支撑、对外应用赋能,全面支撑了各类政务、民生等大数据应用服务。在交通领域,深圳地铁在6、10号线采用华为云FusionInsight构建大数据分析平台,打造领先的5G+大数据方案,并构建其数据资产中心和运行监控中心,承载地铁各业务系统,支撑设备健康、能耗管理、客流统计、线路中心级监控、应急决策和图像型火灾分析等线路级数据分析,数据分析效率从周级缩短至分钟级,实现高效运营,推动深圳步入更美好的全联接数字化轨道交通新时代…以及在环境保护方面,青海绿能数据有限公司基于华为云FusionInsight构建了国内首个能源大数据创新平台,实现了规划辅助决策、用气象数据科学指导发电等创新业务,为上下游产业链企业提供25类47项数据服务,推动28座新能源场站实现了“无人值班、少人值守”,并有效支撑了青海“绿电15日”,以大数据为基石,建设绿色新青海,守护高原和谐生态。同时,华为坚持“自己的降落伞自己先跳”,华为集团IT通过FusionInsight构建OneData大数据集群,实现大数据平台在大规模场景下的开拓,OneData集群其规模已至1万+节点;同时,实现了统一的数据管理服务,在菩提海UniDB产品中,通过逻辑统一方式,把50+物理分散的计算集群(Hadoop+MPP),基于五统一(数据安全,元数据目录,数据集成,数据访问,任务调度),整合成湖仓一体的架构,支撑上千个企业租户的PB级数据分析处理需求。一个基于FusionInsight MRS+DWS 的“+治理,+AI,+运营,+云”的融合数据底座(菩提海)已经在华为集团IT广泛使用,未来可期!以上只是“冰山的一角”,华为云FusionInsight一方面不断深入理解客户不断发展的业务诉求,另一方面,持续技术创新并引领行业发展,商业诉求+技术创新双轮驱动行业可持续、高质量发展,“用数”助力客户商业成功!上面的论述已经充分证明,华为云是“懂行”的大数据领导者,真正让客户用好数、管好数、放心用!底子硬才是真的硬道理可以看到,无论是技术实力还是市场表现,华为云都做到了行业第一。那么,在已有的成绩面前,华为云能否“守得住”?这方面,从已有的动作看,差异化这个主要的特征之外,华为云维持自身地位还有三个方面的竞争优势。长期的技术沉淀华为云 FusionInsight 大数据自 2009 年就开始投入研究,最早在 2014 年推出商用产品,现在,MRS“大快融稳”的云原生数据湖、DWS企业级数据仓库以及一站式数据湖治理中心3项硬核能力都建立这样的长期积累之上,缺乏技术积累和理解的平台显然无法完成这样的升级。对行业、对业务、对企业实际的理解大数据服务必须建立在业务深度理解的基础上,而这不是一朝一夕能完成的,需要靠不断的探索和磨合。华为的市场第一既是一种竞争结果,也代表着它拥有最广泛和深度的业务实践机会。丰富而深厚的生态合作当下,华为云积累了从基础设施到分析应用等领域的合作伙伴群体,包括多行业 800+ISV等,现在,其为合作伙伴提供了100+开放API接口,技术生态化带来的大数据应用将更加丰富。可以看到,三个都需要时间和经验积淀的优势,让华为云大数据有了既深且宽的竞争“护城河”。
-
MapReduce服务(MRS)提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件,用户无需关注硬件的购买和维护。MRS服务拥有强大的Hadoop内核团队,基于华为FusionInsight大数据企业级平台构筑,历经行业数万节点部署量的考验,提供多级用户SLA保障。具体安全性体现如下:1、MRS服务支持资源专属区内部署,专属区内物理资源隔离,用户可以在专属区内灵活地组合计算存储资源,包括专属计算资源+共享存储资源、共享计算资源+专属存储资源、专属计算资源+专属存储资源。MRS集群内支持逻辑多租,通过权限隔离,对集群的计算、存储、表格等资源按租户划分。2、MRS支持Kerberos安全认证,实现了基于角色的安全控制及完善的审计功能。3、MRS支持对接华为云云审计服务(CTS),为用户提供MRS资源操作请求及请求结果的操作记录,供用户查询、审计和回溯使用。支持所有集群操作审计,所有用户行为可溯源。4、MRS支持与主机安全服务对接,针对主机安全服务,做过兼容性测试,保证功能和性能不受影响的情况下,增强服务的安全能力。5、MRS支持基于WebUI的统一的用户登录能力,Manager自带用户认证环节,用户只有通过Manager认证才能正常访问集群。6、MRS支持数据存储加密,所有用户账号密码加密存储,数据通道加密传输,服务模块跨信任区的数据访问支持双向证书认证等能力。7、MRS大数据集群提供了完整的企业级大数据多租户解决方案。多租户是MRS大数据集群中的多个资源集合(每个资源集合是一个租户),具有分配和调度资源(资源包括计算资源和存储资源)的能力。多租户将大数据集群的资源隔离成一个个资源集合,彼此互不干扰,用户通过“租用”需要的资源集合,来运行应用和作业,并存放数据。在大数据集群上可以存在多个资源集合来支持多个用户的不同需求。8、MRS支持细粒度权限管理,结合华为云IAM服务提供的一种细粒度授权的能力,可以精确到具体服务的操作、资源以及请求条件等。基于策略的授权是一种更加灵活的授权方式,能够满足企业对权限最小化的安全管控要求。例如:针对MRS服务,管理员能够控制IAM用户仅能对集群进行指定的管理操作。如不允许某用户组删除集群,仅允许操作MRS集群基本操作,如创建集群、查询集群列表等。同时MRS支持多租户对OBS存储的细粒度权限管理,根据多种用户角色来区分访问OBS桶及其内部的对象的权限,实现MRS用户对OBS桶下的目录权限控制。9、MRS支持企业项目管理。企业项目是一种云资源管理方式,企业管理(Enterprise Management)提供面向企业客户的云上资源管理、人员管理、权限管理、财务管理等综合管理服务。区别于管理控制**立操控、配置云产品的方式,企业管理控制台以面向企业资源管理为出发点,帮助企业以公司、部门、项目等分级管理方式实现企业云上的人员、资源、权限、财务的管理。MRS支持已开通企业项目服务的用户在创建集群时为集群配置对应的项目,然后使用企业项目管理对MRS上的的资源进行分组管理。此特性适用于客户针对多个资源进行分组管理,并对相应的企业项目进行诸如权限控制、分项目费用查看等操作的场景。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签