- 经历了三个阶段大概三个月的学习,大数据全栈课程迎来了尾声,今天是大数据三阶段的最后一天,也是整个大数据课程的最后一天。这三个月的学习过程,并不是一帆风顺,而且一路荆棘。第一阶段:大数据入门篇 第一阶段的课程主要是大数据的入门知识,包括MySQL基本知识、各种概念和常用语句、JDBC的使用还有数据库事务等等,虽然是基础知识,但是非常实用,在开发中会经常用到,基本上就是对数据库的各... 经历了三个阶段大概三个月的学习,大数据全栈课程迎来了尾声,今天是大数据三阶段的最后一天,也是整个大数据课程的最后一天。这三个月的学习过程,并不是一帆风顺,而且一路荆棘。第一阶段:大数据入门篇 第一阶段的课程主要是大数据的入门知识,包括MySQL基本知识、各种概念和常用语句、JDBC的使用还有数据库事务等等,虽然是基础知识,但是非常实用,在开发中会经常用到,基本上就是对数据库的各...
- “动态增量”是“增量导入数据”在9.1版本中新增的入集市的方式。随着数据量的增大,咱们入集市的方式渐渐的从“同步数据”变成“增量导入数据”,“增量导入数据”的优点大致有两点:1. 入集市的时候可以打上meta,查询的时候按照meta进行查询,加快查询速度;2. 采取每次追加部分数据的方式,跟“同步数据”每次全量数据入集市的方式相比,每天入集市任务的时间更短;数据库处理的数据量更小,减少数据库... “动态增量”是“增量导入数据”在9.1版本中新增的入集市的方式。随着数据量的增大,咱们入集市的方式渐渐的从“同步数据”变成“增量导入数据”,“增量导入数据”的优点大致有两点:1. 入集市的时候可以打上meta,查询的时候按照meta进行查询,加快查询速度;2. 采取每次追加部分数据的方式,跟“同步数据”每次全量数据入集市的方式相比,每天入集市任务的时间更短;数据库处理的数据量更小,减少数据库...
- 第二节:Hadoop优势Hadoop的优势(4高)1)高可靠性:Hadoop底层维护多个数据副本,所以即时Hadoop某个计算元素或存储出现故障,也不会导致数据的丢失2)高扩展性:在集群间分配任务数据,可方便的扩展数以千计的节点3)高效性:在MapReduce的思想下,Hadoop是并行工作的,以加快任务处理速度4)高容错性:能够自动将失败任务重新分配Hadoop1.x和2.x的区别Had... 第二节:Hadoop优势Hadoop的优势(4高)1)高可靠性:Hadoop底层维护多个数据副本,所以即时Hadoop某个计算元素或存储出现故障,也不会导致数据的丢失2)高扩展性:在集群间分配任务数据,可方便的扩展数以千计的节点3)高效性:在MapReduce的思想下,Hadoop是并行工作的,以加快任务处理速度4)高容错性:能够自动将失败任务重新分配Hadoop1.x和2.x的区别Had...
- 第一节:什么是Hadoop1)Hadoop是一个有Apache基金会所开发的分布式系统基础架构2)主要解决:海量数据的存储和海量数据的分析计算问题3)广义上来说,Hadoop通常是指一个更广泛的概念--Hadoop生态圈Hadoop发展史:1)Lucene框架是Doug Cutting开创的开源软件,用Java书写代码,实现与Google类似的全文搜索功能,它提供了全文检索引擎的架构,包括... 第一节:什么是Hadoop1)Hadoop是一个有Apache基金会所开发的分布式系统基础架构2)主要解决:海量数据的存储和海量数据的分析计算问题3)广义上来说,Hadoop通常是指一个更广泛的概念--Hadoop生态圈Hadoop发展史:1)Lucene框架是Doug Cutting开创的开源软件,用Java书写代码,实现与Google类似的全文搜索功能,它提供了全文检索引擎的架构,包括...
- 云驻计划是面向华为云社区注册用户,给予全体开发者在内容创作上的激励计划。个人用户和企业账号,入驻华为云社区,可享受丰厚的奖品、各项荣誉及权益,更有百万流量扶持。下面小编给大家公示2021年1月的激励情况。 云驻计划是面向华为云社区注册用户,给予全体开发者在内容创作上的激励计划。个人用户和企业账号,入驻华为云社区,可享受丰厚的奖品、各项荣誉及权益,更有百万流量扶持。下面小编给大家公示2021年1月的激励情况。
- 诚邀广大开发者、技术媒体号入驻华为云社区,分享优质技术内容。可享受丰厚的奖品、各项荣誉及权益,更有百万流量扶持。以下是云驻计划2021年1月份激励情况。 诚邀广大开发者、技术媒体号入驻华为云社区,分享优质技术内容。可享受丰厚的奖品、各项荣誉及权益,更有百万流量扶持。以下是云驻计划2021年1月份激励情况。
- 基于5G改变电力行业的能力,各方针对5G网络承载电力应用开展了深入探索。目前已证明5G网络能够很好地承载电力业务,进一步的融合应用探索正在逐步展开。疫情“通行令”:通信大数据行程卡“通信大数据行程卡”是由中国信通院联合中国电信、中国移动、中国联通三家基础电信企业手机“信令数据”,通过用户手机所处的基站位置获取为全国16亿户手机用户免费提供的查询服务,是对此前通过短信查询行程的服务升级。“通信... 基于5G改变电力行业的能力,各方针对5G网络承载电力应用开展了深入探索。目前已证明5G网络能够很好地承载电力业务,进一步的融合应用探索正在逐步展开。疫情“通行令”:通信大数据行程卡“通信大数据行程卡”是由中国信通院联合中国电信、中国移动、中国联通三家基础电信企业手机“信令数据”,通过用户手机所处的基站位置获取为全国16亿户手机用户免费提供的查询服务,是对此前通过短信查询行程的服务升级。“通信...
- 2020年8月27日,中国工商银行联合华为完成了金融行业首家规模超千台的Hadoop集群大版本滚动升级,为期两周的升级过程突破了传统的离线升级模式,真正实现了业务无感的平滑滚动升级。全程集群作业无中断、性能无影响,为全行上百个应用、上千个场景、上万个作业保障了7*24小时不间断的数据服务。本次滚动升级对金融科技领域意义重大,中国工商银行为金融同业树立了大数据服务连续性上的建设标杆。 2020年8月27日,中国工商银行联合华为完成了金融行业首家规模超千台的Hadoop集群大版本滚动升级,为期两周的升级过程突破了传统的离线升级模式,真正实现了业务无感的平滑滚动升级。全程集群作业无中断、性能无影响,为全行上百个应用、上千个场景、上万个作业保障了7*24小时不间断的数据服务。本次滚动升级对金融科技领域意义重大,中国工商银行为金融同业树立了大数据服务连续性上的建设标杆。
- 大数据全栈成长计划 大数据入门篇最终考核成绩公布! 大数据全栈成长计划 大数据入门篇最终考核成绩公布!
- 华为云FusionInsight MRS云原生数据湖全面升级,直接传统大数据三大痛点,助力政企释放海量数据价值,实现一企一湖、一城一湖,业务洞见更准,价值兑现更快! 华为云FusionInsight MRS云原生数据湖全面升级,直接传统大数据三大痛点,助力政企释放海量数据价值,实现一企一湖、一城一湖,业务洞见更准,价值兑现更快!
- 11月26-27日,“2020华为数智金融论坛”在东莞松山湖溪村成功举办。此次论坛以“数智金融•使能创新”为主题,汇聚了来自全国金融界精英,共同探讨如何打造面向未来的数据智能平台,共话金融行业未来发展。 11月26-27日,“2020华为数智金融论坛”在东莞松山湖溪村成功举办。此次论坛以“数智金融•使能创新”为主题,汇聚了来自全国金融界精英,共同探讨如何打造面向未来的数据智能平台,共话金融行业未来发展。
- 云驻计划是面向华为云社区注册用户,给予全体开发者在内容创作上的激励计划。个人用户和企业账号,入驻华为云社区,可享受丰厚的奖品、各项荣誉及权益,更有百万流量扶持。 云驻计划是面向华为云社区注册用户,给予全体开发者在内容创作上的激励计划。个人用户和企业账号,入驻华为云社区,可享受丰厚的奖品、各项荣誉及权益,更有百万流量扶持。
- 近日,全球领先的IT研究和咨询公司国际数据公司(IDC)最新发布《IDC MarketScape: 中国大数据管理平台厂商评估,2020》报告,对中国主流大数据厂商从能力、市场、战略三个维度进行了全面评估。在华为云FusionInsight过硬的综合实力和技术创新加持下,华为云位居“领导者(Leaders)”象限,并在市场份额和技术实力两个维度双领先。华为云FusionInsight智能数据... 近日,全球领先的IT研究和咨询公司国际数据公司(IDC)最新发布《IDC MarketScape: 中国大数据管理平台厂商评估,2020》报告,对中国主流大数据厂商从能力、市场、战略三个维度进行了全面评估。在华为云FusionInsight过硬的综合实力和技术创新加持下,华为云位居“领导者(Leaders)”象限,并在市场份额和技术实力两个维度双领先。华为云FusionInsight智能数据...
- 您的“头顶安全”,华为云来守护 您的“头顶安全”,华为云来守护
- 基于大数据进行联合创新 基于大数据进行联合创新
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签