- 刊华为云FusionInsight如何携手Kyligence推进保险业的数字化转型。 刊华为云FusionInsight如何携手Kyligence推进保险业的数字化转型。
- Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及 并行化计算的流数据处理引擎。它的大亮点是流处理,是业界顶级的开源流处理 引擎。 Flink适合的应用场景是低时延的数据处理(Data Processing)场景:高并发 pipeline处理数据,时延毫秒级,且兼具可靠性。 Flink技术栈如图1-14所示。图 1-14 Flink 技术栈Flink在当前版本中... Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及 并行化计算的流数据处理引擎。它的大亮点是流处理,是业界顶级的开源流处理 引擎。 Flink适合的应用场景是低时延的数据处理(Data Processing)场景:高并发 pipeline处理数据,时延毫秒级,且兼具可靠性。 Flink技术栈如图1-14所示。图 1-14 Flink 技术栈Flink在当前版本中...
- 福哥答案2020-08-24:[知乎答案](https://www.zhihu.com/question/417040766)1.小文件:小文件是指文件大小明显小于 HDFS 上块(block)大小(默认64MB,在Hadoop2.x中默认为128MB)的文件。2.小文件问题:HDFS的小文件问题:(1)HDFS 中任何一个文件,目录或者数据块在 NameNode 节点内存中均以一个对象形式... 福哥答案2020-08-24:[知乎答案](https://www.zhihu.com/question/417040766)1.小文件:小文件是指文件大小明显小于 HDFS 上块(block)大小(默认64MB,在Hadoop2.x中默认为128MB)的文件。2.小文件问题:HDFS的小文件问题:(1)HDFS 中任何一个文件,目录或者数据块在 NameNode 节点内存中均以一个对象形式...
- 在flink的世界里,时间和窗口是两个非常重要的性质,这二者是如何运转起来以及如何交互,本文将详细介绍这两个特性。基于时间本文会介绍接入时间、处理时间、事件时间、watermark等概念,基于窗口本文会介绍窗口类型、窗口分配器、窗口触发器、剔除器、迟到数据处理、窗口状态、窗口join、窗口整体执行流程等概念。 在flink的世界里,时间和窗口是两个非常重要的性质,这二者是如何运转起来以及如何交互,本文将详细介绍这两个特性。基于时间本文会介绍接入时间、处理时间、事件时间、watermark等概念,基于窗口本文会介绍窗口类型、窗口分配器、窗口触发器、剔除器、迟到数据处理、窗口状态、窗口join、窗口整体执行流程等概念。
- 没想到,我在中关村遇到了“扫地僧”…… 没想到,我在中关村遇到了“扫地僧”……
- 将HBase安装文件解压,配置hbase-env.sh、hbase-site.xml、regionservers这三个文件,启动hbase集群。 将HBase安装文件解压,配置hbase-env.sh、hbase-site.xml、regionservers这三个文件,启动hbase集群。
- 云计算、大数据、人工智能、物联网、5G、边缘计算等多种技术的发展和融合不断颠覆企业中各类业务原有的运营管理模式,企业管理人员对实时数据的访问需求也愈发强烈,软硬件技术的高速迭代也带来了数据的爆炸式增长。《华为全球产业展望GIV2025》预测,到2025年,全球年存储数据量将高达180ZB。面对逐渐庞大的数据,传统的关系型数据库和数据仓库已经无法满足数据的组织、存储、分析需求。《Gartner... 云计算、大数据、人工智能、物联网、5G、边缘计算等多种技术的发展和融合不断颠覆企业中各类业务原有的运营管理模式,企业管理人员对实时数据的访问需求也愈发强烈,软硬件技术的高速迭代也带来了数据的爆炸式增长。《华为全球产业展望GIV2025》预测,到2025年,全球年存储数据量将高达180ZB。面对逐渐庞大的数据,传统的关系型数据库和数据仓库已经无法满足数据的组织、存储、分析需求。《Gartner...
- 随着技术的发展,探索数据价值一直在持续,数据平台技术架构也逐步在进化。华为云针对企业上云与治理提出了一套适用于互联网、金融、游戏、产业云等行业的解决方案,数据上云全场景覆盖,华为云助力企业智能化升级! 随着技术的发展,探索数据价值一直在持续,数据平台技术架构也逐步在进化。华为云针对企业上云与治理提出了一套适用于互联网、金融、游戏、产业云等行业的解决方案,数据上云全场景覆盖,华为云助力企业智能化升级!
- 福哥答案2020-08-16:[此答案【来自华为云社区】的【阿刚】](https://bbs.huaweicloud.com/blogs/147398)一 问题背景项目中遇到大数据任务执行时间比较长,需要进行优化,使得大数据的任务执行时间优化至客户可以接受的时间。二 原因分析l 业务场景分析本场景下的大数据任务主要对数据进行mapreduce操作,该任务包含两个子任务,第一个子任务的map... 福哥答案2020-08-16:[此答案【来自华为云社区】的【阿刚】](https://bbs.huaweicloud.com/blogs/147398)一 问题背景项目中遇到大数据任务执行时间比较长,需要进行优化,使得大数据的任务执行时间优化至客户可以接受的时间。二 原因分析l 业务场景分析本场景下的大数据任务主要对数据进行mapreduce操作,该任务包含两个子任务,第一个子任务的map...
- 这是我第一次发帖,内容有点少,不过很开心终于迈出了第一步,以后会走的更远 自从知道“大数据”这个新概念,本人就一直对这方面很感兴趣,自然也就在不断了解大数据相关的技术。 5G技术应用后,开始出现了和传统数据截然不同的复杂数据,也就是大家提到的大数据。之所以成为大数据,是因为相对与传统业务数据,这种数据量庞大,一般数据量都会达到100T,普通的计算机硬盘根本无法胜任存储工作... 这是我第一次发帖,内容有点少,不过很开心终于迈出了第一步,以后会走的更远 自从知道“大数据”这个新概念,本人就一直对这方面很感兴趣,自然也就在不断了解大数据相关的技术。 5G技术应用后,开始出现了和传统数据截然不同的复杂数据,也就是大家提到的大数据。之所以成为大数据,是因为相对与传统业务数据,这种数据量庞大,一般数据量都会达到100T,普通的计算机硬盘根本无法胜任存储工作...
- 在不确定的时代,企业该如何应对呢?答案很简单,向数据要确定性。新冠疫情这场危机中,锦江之星作为受影响最大的行业之一,华为云的GaussDB(for MySQL)成功助力锦江酒店业务实现数据库跃迁式升级,有效应对了疫情的突发打击…… 在不确定的时代,企业该如何应对呢?答案很简单,向数据要确定性。新冠疫情这场危机中,锦江之星作为受影响最大的行业之一,华为云的GaussDB(for MySQL)成功助力锦江酒店业务实现数据库跃迁式升级,有效应对了疫情的突发打击……
- flume-obs flume-obs
- 随着企业数据资产的增加,如何能可靠安全的存储这些数据,以及如何能高效处理这些数据成为了大数据技术的起点,以hadoop为代表的开源技术大肆兴起,随后大数据技术栈如雨后春笋般的涌现,hive,spark,impala,presto,flink。。。几乎每隔一两年就会有新的大数据处理框架出现,同时也出现了HDP,CDH,FusionInsight等整体解决方案,而随着云计算的发展和各企业... 随着企业数据资产的增加,如何能可靠安全的存储这些数据,以及如何能高效处理这些数据成为了大数据技术的起点,以hadoop为代表的开源技术大肆兴起,随后大数据技术栈如雨后春笋般的涌现,hive,spark,impala,presto,flink。。。几乎每隔一两年就会有新的大数据处理框架出现,同时也出现了HDP,CDH,FusionInsight等整体解决方案,而随着云计算的发展和各企业...
- 华为公有云大数据平台MRS默认不支持Phoenix,此文档介绍如何将开源Phoenix集成到MRS中,以便在HBase中使用SQL。 华为公有云大数据平台MRS默认不支持Phoenix,此文档介绍如何将开源Phoenix集成到MRS中,以便在HBase中使用SQL。
- 1 介绍select *from store join store_sales on (store.id = store_sales.store_id)where store.s_store_name = 'My Store'在这个语句中,事实表store_sales与维度表store通过store_id进行jion,维度表store通过s_store_name进行过滤。Sto... 1 介绍select *from store join store_sales on (store.id = store_sales.store_id)where store.s_store_name = 'My Store'在这个语句中,事实表store_sales与维度表store通过store_id进行jion,维度表store通过s_store_name进行过滤。Sto...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签