- 马上过年了，紧接着就是一年一度的跳槽季，送上一份Spark面试干货，提前预热~~ 马上过年了，紧接着就是一年一度的跳槽季，送上一份Spark面试干货，提前预热~~
- 海量数据实时计算：Spark和Flink引擎如何保证Exactly-Once一致性？ 海量数据实时计算：Spark和Flink引擎如何保证Exactly-Once一致性？
- 从家居到工业场景，点亮一盏智能灯带来的不仅仅是光亮，数据在流转之间，改变了我们的生活，也推动了整个城市的智能化建设。 从家居到工业场景，点亮一盏智能灯带来的不仅仅是光亮，数据在流转之间，改变了我们的生活，也推动了整个城市的智能化建设。
- 今天和大家介绍Spark的内存模型，干货多多，不要错过奥~ 今天和大家介绍Spark的内存模型，干货多多，不要错过奥~
- 数据湖治理中心DGC(Data Lake Governance Center) 是一个数据全生命周期管理、具有智能数据管理能力的一站式治理平台，支持大数据存储、大数据计算分析引擎等数据底座，帮助企业快速构建从数据接入到数据分析的端到端智能数据系统，消除数据孤岛，统一数据标准，加快数据变现，实现数字化转型。 数据湖治理中心DGC(Data Lake Governance Center) 是一个数据全生命周期管理、具有智能数据管理能力的一站式治理平台，支持大数据存储、大数据计算分析引擎等数据底座，帮助企业快速构建从数据接入到数据分析的端到端智能数据系统，消除数据孤岛，统一数据标准，加快数据变现，实现数字化转型。
- 持续践行“平台+生态”战略，服务于全球客户 持续践行“平台+生态”战略，服务于全球客户
- 早在2020年5月华为云全球分析师大会中，华为率先提出“湖仓一体”概念，并落地在华为云FusionInsight智能数据湖解决方案中。其中，HetuEngine河图引擎承担一站式SQL分析引擎角色，使能跨源、跨域的一体化分析落地。基于云原生架构，让“逻辑数据湖”大规模数据融合分析提效50倍，本文将详细阐述HetuEngine在实现一站式SQL分析所面临的挑战、技术架构和案例。 早在2020年5月华为云全球分析师大会中，华为率先提出“湖仓一体”概念，并落地在华为云FusionInsight智能数据湖解决方案中。其中，HetuEngine河图引擎承担一站式SQL分析引擎角色，使能跨源、跨域的一体化分析落地。基于云原生架构，让“逻辑数据湖”大规模数据融合分析提效50倍，本文将详细阐述HetuEngine在实现一站式SQL分析所面临的挑战、技术架构和案例。
- 近日，全球领先的IT研究和咨询公司国际数据公司（IDC）发布《中国大数据平台市场研究报告，2021H1》，华为云FusionInsight智能数据湖位居中国大数据平台市场份额第一，连续三次蝉联榜首。 近日，全球领先的IT研究和咨询公司国际数据公司（IDC）发布《中国大数据平台市场研究报告，2021H1》，华为云FusionInsight智能数据湖位居中国大数据平台市场份额第一，连续三次蝉联榜首。
- 某年某日某君，于某都面试，为Flink双流JOIN所惑~ 有感而发，遂下笔，为君解惑~ 某年某日某君，于某都面试，为Flink双流JOIN所惑~ 有感而发，遂下笔，为君解惑~
- 技术背景随着互联网高速的发展，云计算、大数据、人工智能AI、物联网等前沿技术已然成为当今时代主流的高新技术，诸如电商网站、人脸识别、无人驾驶、智能家居、智慧城市等等，不仅方面方便了人们的衣食住行，背后更是时时刻刻有大量的数据在经过各种各样的系统平台的采集、清晰、分析，而保证数据的低时延、高吞吐、安全性就显得尤为重要，Apache Avro本身通过Schema的方式序列化后进行二进制传输，一方... 技术背景随着互联网高速的发展，云计算、大数据、人工智能AI、物联网等前沿技术已然成为当今时代主流的高新技术，诸如电商网站、人脸识别、无人驾驶、智能家居、智慧城市等等，不仅方面方便了人们的衣食住行，背后更是时时刻刻有大量的数据在经过各种各样的系统平台的采集、清晰、分析，而保证数据的低时延、高吞吐、安全性就显得尤为重要，Apache Avro本身通过Schema的方式序列化后进行二进制传输，一方...
- 温馨提示：此次实践的项目需要费用和开发板，我在原来的基础上购买了付费的可视化大屏，当然付出是值得的。物联网解决方案中，作为数据主体的“物”可能数量会非常大，产生的数据已经无法通过传统的数据处理服务进行处理。如何分析与利用这庞大的物联网设备数据对物联网企业来说又是一个新的挑战。希望在下次活动中能从企业客户案例转换至小型用户的数据大屏前期体验版本。在本示例中，我们实现下述场景：利用集群将小熊派开... 温馨提示：此次实践的项目需要费用和开发板，我在原来的基础上购买了付费的可视化大屏，当然付出是值得的。物联网解决方案中，作为数据主体的“物”可能数量会非常大，产生的数据已经无法通过传统的数据处理服务进行处理。如何分析与利用这庞大的物联网设备数据对物联网企业来说又是一个新的挑战。希望在下次活动中能从企业客户案例转换至小型用户的数据大屏前期体验版本。在本示例中，我们实现下述场景：利用集群将小熊派开...
- 🌹0 写在开头开始更新Hadoop系列教学文章了，从零带你入门大数据，期待的你的关注❤️❤️ ☕1 Hadoop是什么1）Hadoop是一个由Apache基金会所开发的分布式系统基础架构2）主要解决，海量数据的存储和海量数据的分析计算问题。3）广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。 🚀2 Hadoop 发展历史（了解）1）Hadoop创始人Doug C... 🌹0 写在开头开始更新Hadoop系列教学文章了，从零带你入门大数据，期待的你的关注❤️❤️ ☕1 Hadoop是什么1）Hadoop是一个由Apache基金会所开发的分布式系统基础架构2）主要解决，海量数据的存储和海量数据的分析计算问题。3）广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。 🚀2 Hadoop 发展历史（了解）1）Hadoop创始人Doug C...
- 1.Hive 表关联查询，如何解决数据倾斜的问题？1.倾斜原因：map 输出数据按 key Hash 的分配到 reduce 中，由于 key 分布不均匀、业务数据本身的特、建表时考虑不周、等原因造成的 reduce 上的数据量差异过大。1）key 分布不均匀;2）业务数据本身的特性;3）建表时考虑不周;4）某些 SQL 语句本身就有数据倾斜;如何避免：对于 key 为空产生的数据倾斜，可... 1.Hive 表关联查询，如何解决数据倾斜的问题？1.倾斜原因：map 输出数据按 key Hash 的分配到 reduce 中，由于 key 分布不均匀、业务数据本身的特、建表时考虑不周、等原因造成的 reduce 上的数据量差异过大。1）key 分布不均匀;2）业务数据本身的特性;3）建表时考虑不周;4）某些 SQL 语句本身就有数据倾斜;如何避免：对于 key 为空产生的数据倾斜，可...
- 各位开发者大家好 大数据全栈成长计划 最终积分排行榜与实体证书最终结果已出炉 各位开发者大家好 大数据全栈成长计划 最终积分排行榜与实体证书最终结果已出炉
- 处理日期和时间是编程中最大的挑战之一。在处理时区、夏令时和不同的书面日期格式之间，很难跟踪您所引用的日期和时间。幸运的是，内置的 Pythondatetime模块可以帮助您管理日期和时间的复杂性质。 处理日期和时间是编程中最大的挑战之一。在处理时区、夏令时和不同的书面日期格式之间，很难跟踪您所引用的日期和时间。幸运的是，内置的 Pythondatetime模块可以帮助您管理日期和时间的复杂性质。
上滑加载中
推荐直播
-
解密IoT应用客户端开发流程2022/01/14 周五 20:00-21:00
Vz 华为云IoT高级工程师
本次直播将分享HarmonyOS应用开发基础知识、华为云物联网平台基础功能，以及如何基于HarmonyOS实现物联网应用客户端开发。
回顾中 -
听懂“设备”说话，实现数字化监控2022/01/18 周二 20:00-21:00
小边 华为云IoT边缘产品总监；张宝乾 商软云集成产品负责人
本次直播主要介绍如何使用边缘数采能力、作用及价值介绍；商软与华为云IoT边缘合作数采方案；如何基于IoT边缘做到IT&OT数采融合解决痛点。
即将直播 -
热门标签