- 【网络类】从友商搬到华为云需要拉专线，专线的时延和成本怎么保障答：选择从最近的Region拉专线，将时延控制在ms级别不影响正常的使用，带宽的成本可以被存算分离的成本优势cover 【资源类】如何保证AZ内资源充足答：华为云的资源有多种形式来保障可用度，比如AZ内会设置阈值，使用率达到阈值后会进行扩容，始终保持AZ的可用资源在一定范围，可供客户使用；同时，如果AZ的可用空间预计已经不能支持... 【网络类】从友商搬到华为云需要拉专线，专线的时延和成本怎么保障答：选择从最近的Region拉专线，将时延控制在ms级别不影响正常的使用，带宽的成本可以被存算分离的成本优势cover 【资源类】如何保证AZ内资源充足答：华为云的资源有多种形式来保障可用度，比如AZ内会设置阈值，使用率达到阈值后会进行扩容，始终保持AZ的可用资源在一定范围，可供客户使用；同时，如果AZ的可用空间预计已经不能支持...
- 【通用】华为云在大数据社区、内核的投入如何？答：华为有100+人（大部分在印度）专门在社区，发华为的内核版本，提交华为的特性功能，这部分人员专职社区贡献。因此华为在hadoop及其生态社区的贡献一直居于国内首位。 【数据采集&接入】在华为云上，关系数据库实时同步到hadoop的hive表里用什么方案？答：一般使用DRS+DMS（Kafka云服务）+MRS-Flink. DRS... 【通用】华为云在大数据社区、内核的投入如何？答：华为有100+人（大部分在印度）专门在社区，发华为的内核版本，提交华为的特性功能，这部分人员专职社区贡献。因此华为在hadoop及其生态社区的贡献一直居于国内首位。 【数据采集&接入】在华为云上，关系数据库实时同步到hadoop的hive表里用什么方案？答：一般使用DRS+DMS（Kafka云服务）+MRS-Flink. DRS...
- 如何把数据治理的方法论贯彻到公司的各个部门？答：1、首先数据治理是需要是一个自顶向下的推动，也就是公司的一把手需要明确数据治理的战略，这样才好推动 2、成立数据管理部这样的虚拟组织，来拉通各个部门进行统一的数据管理和标准建设 3、对于有自己独特需求或难以拉通的部门，可以考虑从统一的数据平台取数给他，他们自己进行数据分析和应用，但不能污染公司级统一的数据中台。 如何来... 如何把数据治理的方法论贯彻到公司的各个部门？答：1、首先数据治理是需要是一个自顶向下的推动，也就是公司的一把手需要明确数据治理的战略，这样才好推动 2、成立数据管理部这样的虚拟组织，来拉通各个部门进行统一的数据管理和标准建设 3、对于有自己独特需求或难以拉通的部门，可以考虑从统一的数据平台取数给他，他们自己进行数据分析和应用，但不能污染公司级统一的数据中台。 如何来...
- CarbonData是什么？跟存算分离有关系吗？CarbonData可对接多引擎是什么意思？答：carbondata则首先是一种数据格式，它对标的是parquet、orc这样的大数据领域常用文件格式，至于它存储的地方可以是本地盘hdfs，也可以是存算分离的OBS。 carbondata其次也是指基于这种格式之上的一套数据存储引擎（其实就是一堆jar包），它强绑定的是spark生态... CarbonData是什么？跟存算分离有关系吗？CarbonData可对接多引擎是什么意思？答：carbondata则首先是一种数据格式，它对标的是parquet、orc这样的大数据领域常用文件格式，至于它存储的地方可以是本地盘hdfs，也可以是存算分离的OBS。 carbondata其次也是指基于这种格式之上的一套数据存储引擎（其实就是一堆jar包），它强绑定的是spark生态...
- hudi的高并发查询能力不足,怎么办？答：lookup直接点查hudi,hudi并发量不够,可以通过在hudi前加入Gaussdb数据库,将原本hudi中,频繁更新,业务复杂,高并发查询的表放入其中查询hudi的cow表和row怎么选？答：cow表是写放大,写入是性能压力比较大,mor是读放大在读取新数据放在log上在读得过程中与老数据进行合并,写性能不受影响hudi选择mor表,主键太多会... hudi的高并发查询能力不足,怎么办？答：lookup直接点查hudi,hudi并发量不够,可以通过在hudi前加入Gaussdb数据库,将原本hudi中,频繁更新,业务复杂,高并发查询的表放入其中查询hudi的cow表和row怎么选？答：cow表是写放大,写入是性能压力比较大,mor是读放大在读取新数据放在log上在读得过程中与老数据进行合并,写性能不受影响hudi选择mor表,主键太多会...
- 什么是存算分离大数据？ 华为云存算分离方案相对于传统本地盘方案有什么优势？ 存算分离能节省多少成本？ 用了存算分离方案是不是必须使用华为 什么是存算分离大数据？ 华为云存算分离方案相对于传统本地盘方案有什么优势？ 存算分离能节省多少成本？ 用了存算分离方案是不是必须使用华为
- 《吊打面试官》- 大数据工程师50道中大厂面试真题保姆级详解 《吊打面试官》- 大数据工程师50道中大厂面试真题保姆级详解
- Apache Kylin，作为一款开源的大数据分析平台，以其独特的预计算技术，为用户提供亚秒级的OLAP查询体验。无论是数据分析师还是大数据工程师，掌握Kylin的使用技巧，都将极大地提升数据洞察力和决策效率。本文将从Kylin的基本概念出发，深入解析其工作原理，分享我在使用过程中的常见问题及解决方案，同时附上实战代码示例，帮助你更有效地驾驭这一强大的分析工具。 Kylin核心概念与原理 1... Apache Kylin，作为一款开源的大数据分析平台，以其独特的预计算技术，为用户提供亚秒级的OLAP查询体验。无论是数据分析师还是大数据工程师，掌握Kylin的使用技巧，都将极大地提升数据洞察力和决策效率。本文将从Kylin的基本概念出发，深入解析其工作原理，分享我在使用过程中的常见问题及解决方案，同时附上实战代码示例，帮助你更有效地驾驭这一强大的分析工具。 Kylin核心概念与原理 1...
- 在大数据处理领域，Apache Storm是一个实时计算系统，专为处理海量数据流而设计。它提供了分布式、容错、高可用的实时计算解决方案，让开发者能够轻松构建复杂的数据处理管道。本文将深入浅出地介绍Storm的核心概念、工作原理、常见问题及其解决方案，并通过一个简单的代码示例来展示如何使用Storm进行实时数据处理。 核心概念与原理 1. Topology（拓扑）在Storm中，一个Topol... 在大数据处理领域，Apache Storm是一个实时计算系统，专为处理海量数据流而设计。它提供了分布式、容错、高可用的实时计算解决方案，让开发者能够轻松构建复杂的数据处理管道。本文将深入浅出地介绍Storm的核心概念、工作原理、常见问题及其解决方案，并通过一个简单的代码示例来展示如何使用Storm进行实时数据处理。 核心概念与原理 1. Topology（拓扑）在Storm中，一个Topol...
- 本文详细介绍了JINQ（Java Integrated Query），一种强化Java中数据查询能力的库，提供类SQL的查询语法和类型安全的操作。文章首先解释了JINQ的基本功能和应用，随后通过具体示例展示了如何使用JINQ进行数据过滤、投影、连接、分组等操作。接着，与Java Stream API、Google Guava等其他热门集合处理包进行了比较，突出了JINQ的类型安全和查询直观性。 本文详细介绍了JINQ（Java Integrated Query），一种强化Java中数据查询能力的库，提供类SQL的查询语法和类型安全的操作。文章首先解释了JINQ的基本功能和应用，随后通过具体示例展示了如何使用JINQ进行数据过滤、投影、连接、分组等操作。接着，与Java Stream API、Google Guava等其他热门集合处理包进行了比较，突出了JINQ的类型安全和查询直观性。
- 本文全面介绍了 Java Stream API 的概念、功能以及如何在 Java 中有效地使用它进行集合和数据流的处理。通过详细解释和示例，文章展示了 Java Stream API 在简化代码、提高效率以及支持函数式编程方面的优势。文中还比较了 Java Stream API 与其他集合处理库的异同，强调了其在现代 Java 开发中的重要性和实用性。 本文全面介绍了 Java Stream API 的概念、功能以及如何在 Java 中有效地使用它进行集合和数据流的处理。通过详细解释和示例，文章展示了 Java Stream API 在简化代码、提高效率以及支持函数式编程方面的优势。文中还比较了 Java Stream API 与其他集合处理库的异同，强调了其在现代 Java 开发中的重要性和实用性。
- ABoVE: Study Domain and Standard Reference Grids, Version 2简介文件修订日期：2023-08-23数据集版本: 2.1摘要北极-北方脆弱性实验（ABoVE）开发了两种标准化空间数据产品，以加快研究活动的协调，促进数据的互操作性。ABoVE 研究域包括美国阿拉斯加的北极和北方地区，以及北美加拿大的西部省份。在该域内指定了核心和扩展研... ABoVE: Study Domain and Standard Reference Grids, Version 2简介文件修订日期：2023-08-23数据集版本: 2.1摘要北极-北方脆弱性实验（ABoVE）开发了两种标准化空间数据产品，以加快研究活动的协调，促进数据的互操作性。ABoVE 研究域包括美国阿拉斯加的北极和北方地区，以及北美加拿大的西部省份。在该域内指定了核心和扩展研...
- ABoVE: Characterization of Carbon Dynamics in Burned Forest Plots, NWT, Canada, 2014简介文件修订日期：2019-04-12数据集版本: 1摘要该数据集提供了加拿大西北地区（NWT）2014 年被野火烧毁的北方森林的实地数据。在 2015 年的实地考察中，共建立了 211 个烧毁地块。从这些地块中选出了 3... ABoVE: Characterization of Carbon Dynamics in Burned Forest Plots, NWT, Canada, 2014简介文件修订日期：2019-04-12数据集版本: 1摘要该数据集提供了加拿大西北地区（NWT）2014 年被野火烧毁的北方森林的实地数据。在 2015 年的实地考察中，共建立了 211 个烧毁地块。从这些地块中选出了 3...
- Soil Respiration Maps for the ABoVE Domain, 2016-2017简介文件修订日期：2022-04-20数据集版本: 1摘要该数据集以 300 米的空间分辨率提供了 2016-08-18 至 2018-09-12 期间阿拉斯加和加拿大西北部受永久冻土影响的冻原和北方生态系统内发生的土壤呼吸作用产生的二氧化碳（CO2）排放量的网格估算值。估算结果包括... Soil Respiration Maps for the ABoVE Domain, 2016-2017简介文件修订日期：2022-04-20数据集版本: 1摘要该数据集以 300 米的空间分辨率提供了 2016-08-18 至 2018-09-12 期间阿拉斯加和加拿大西北部受永久冻土影响的冻原和北方生态系统内发生的土壤呼吸作用产生的二氧化碳（CO2）排放量的网格估算值。估算结果包括...
- 文件修订日期：2022-05-04数据集版本: 1简介该数据集综合了 1983 年至 2016 年期间美国阿拉斯加、西北地区和加拿大萨斯喀彻温省被烧毁的北方森林地点的野外地块特征数据、衍生的地上和地下燃烧碳以及获取的火灾气象指数（FWI）系统组件。此外还包括未烧毁地块的数据。编译的地块级特征数据包括林分年龄、干扰历史、树木密度和树木生物物理测量值，用于计算地上（ag）和地下（bg）生物量... 文件修订日期：2022-05-04数据集版本: 1简介该数据集综合了 1983 年至 2016 年期间美国阿拉斯加、西北地区和加拿大萨斯喀彻温省被烧毁的北方森林地点的野外地块特征数据、衍生的地上和地下燃烧碳以及获取的火灾气象指数（FWI）系统组件。此外还包括未烧毁地块的数据。编译的地块级特征数据包括林分年龄、干扰历史、树木密度和树木生物物理测量值，用于计算地上（ag）和地下（bg）生物量...
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家；李炎-华为云码道产品专家；彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战，从0到1打通消息通道；码道鸿蒙端云一体化实战，快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人；蒋春阳-华为云AI开发者案例开发专家
本期直播内容： AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了：看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签