- 离线同步MySQL数据到HDFS案例：使用NiFi将MySQL中数据导入到HDFS中。以上案例用到的处理器有“QueryDatabaseTable”、“ConvertAvroToJSON”、“SplitJson”、“PutHDFS”四个处理器。一、配置“QueryDatabaseTable”处理器该处理器主要使用提供的SQL语句或者生成SQL语句来查询MySQL中的数据，查询结果转换成Avr... 离线同步MySQL数据到HDFS案例：使用NiFi将MySQL中数据导入到HDFS中。以上案例用到的处理器有“QueryDatabaseTable”、“ConvertAvroToJSON”、“SplitJson”、“PutHDFS”四个处理器。一、配置“QueryDatabaseTable”处理器该处理器主要使用提供的SQL语句或者生成SQL语句来查询MySQL中的数据，查询结果转换成Avr...
- Spark是基于内存的分布式计算框架。 Spark是基于内存的分布式计算框架。
- 海洋总测深图数据集（GEBCO）GEBCO_2021 Grid 是 General Bathymetric Chart of the Oceans (GEBCO) 发布的最新全球测深产品，由日本财团-GEBCO Seabed 2030 项目开发。GEBCO_2021 网格在 43200 行 x 86400 列的 15 弧秒网格上提供以米为单位的全球高程数据覆盖，提供 3,732,480,0... 海洋总测深图数据集（GEBCO）GEBCO_2021 Grid 是 General Bathymetric Chart of the Oceans (GEBCO) 发布的最新全球测深产品，由日本财团-GEBCO Seabed 2030 项目开发。GEBCO_2021 网格在 43200 行 x 86400 列的 15 弧秒网格上提供以米为单位的全球高程数据覆盖，提供 3,732,480,0...
- ASTER全球水体数据库(ASTWBD)第1版Terra高级星载热发射和反射辐射计（ASTER）全球水体数据库（ASTWBD）第1版数据产品以赤道1角秒（约30米）的空间分辨率提供了大于0.2平方公里的水体的全球覆盖，以及相关的海拔信息。ASTWBD数据产品是由东京的传感器信息实验室公司（SILC）与ASTER全球数字高程模型（ASTER GDEM）第三版数据产品共同创建的。ASTER ... ASTER全球水体数据库(ASTWBD)第1版Terra高级星载热发射和反射辐射计（ASTER）全球水体数据库（ASTWBD）第1版数据产品以赤道1角秒（约30米）的空间分辨率提供了大于0.2平方公里的水体的全球覆盖，以及相关的海拔信息。ASTWBD数据产品是由东京的传感器信息实验室公司（SILC）与ASTER全球数字高程模型（ASTER GDEM）第三版数据产品共同创建的。ASTER ...
- Hudi（Hadoop Upserts Deletes and Incrementals）是数据湖的数据组织中间层，可以简单理解为基于Parquet进一步封装的数据格式，能提供表格式、事务能力（插入更新）、增量拉取能力。 Hudi（Hadoop Upserts Deletes and Incrementals）是数据湖的数据组织中间层，可以简单理解为基于Parquet进一步封装的数据格式，能提供表格式、事务能力（插入更新）、增量拉取能力。
- ASTER全球数字高程模型（GDEM）v3ASTER GDEM的第一个版本于2009年6月发布，是利用Terra上的ASTER仪器收集的立体对射图像生成的。ASTER GDEM的覆盖范围从北纬83度到南纬83度，包括了地球上99%的陆地。改进后的GDEM V3增加了更多的立体对，提高了覆盖率，减少了伪影的出现。完善的生产算法提供了更好的空间分辨率，提高了水平和垂直精度。ASTER GDEM... ASTER全球数字高程模型（GDEM）v3ASTER GDEM的第一个版本于2009年6月发布，是利用Terra上的ASTER仪器收集的立体对射图像生成的。ASTER GDEM的覆盖范围从北纬83度到南纬83度，包括了地球上99%的陆地。改进后的GDEM V3增加了更多的立体对，提高了覆盖率，减少了伪影的出现。完善的生产算法提供了更好的空间分辨率，提高了水平和垂直精度。ASTER GDEM...
- FABDEM去除森林和建筑物的哥白尼30米DEMFABDEM（去除森林和建筑物的哥白尼DEM）从哥白尼GLO 30数字高程模型（DEM）中去除建筑物和树木高度的偏差（空中客车，2020年）。该数据以1角秒的网格间距（赤道上约30米）提供给全球。作者使用机器学习从哥白尼数字高程模型中去除建筑物和森林，首次产生了一个以1角秒（∼30米）网格间距去除建筑物和森林的全球高程地图。你可以在这里阅读该... FABDEM去除森林和建筑物的哥白尼30米DEMFABDEM（去除森林和建筑物的哥白尼DEM）从哥白尼GLO 30数字高程模型（DEM）中去除建筑物和树木高度的偏差（空中客车，2020年）。该数据以1角秒的网格间距（赤道上约30米）提供给全球。作者使用机器学习从哥白尼数字高程模型中去除建筑物和森林，首次产生了一个以1角秒（∼30米）网格间距去除建筑物和森林的全球高程地图。你可以在这里阅读该...
- 哥白尼数字高程模型（GLO-30 DEM）哥白尼DEM是一个数字表面模型（DSM），代表了地球的表面，包括建筑物、基础设施和植被。我们提供两种哥白尼DEM的实例，分别是GLO-30 Public和GLO-90。GLO-90提供90米的全球覆盖。GLO-30公共版提供有限的30米的全球覆盖，因为哥白尼计划还没有向公众发布覆盖特定国家的一小部分瓦片。请注意，在这两种情况下，海洋地区都没有瓦片，... 哥白尼数字高程模型（GLO-30 DEM）哥白尼DEM是一个数字表面模型（DSM），代表了地球的表面，包括建筑物、基础设施和植被。我们提供两种哥白尼DEM的实例，分别是GLO-30 Public和GLO-90。GLO-90提供90米的全球覆盖。GLO-30公共版提供有限的30米的全球覆盖，因为哥白尼计划还没有向公众发布覆盖特定国家的一小部分瓦片。请注意，在这两种情况下，海洋地区都没有瓦片，...
- Yarn是主从结构的资源管理调度框架。 Yarn是主从结构的资源管理调度框架。
- Doris集成Spark读写的简单示例 Doris集成Spark读写的简单示例
- Canal实时监控案例 Canal实时监控案例
- 大数据技术之Maxwell入门案例学习 大数据技术之Maxwell入门案例学习
- NiFi入门案例二需求：随机生成一些测试数据集，对生成的数据进行正则匹配，对匹配后的数据进行输出到外部文件中。以上需要用到的“GenerateFlowFile”、“ReplaceText”、“PutFile”处理器。一、配置“GenerateFlowFile”处理器这个处理器可以生成随机的FlowFile数据或者生成自定义内容的FlowFile。多用于负载测试和模拟生成数据测试。1、拖拽“... NiFi入门案例二需求：随机生成一些测试数据集，对生成的数据进行正则匹配，对匹配后的数据进行输出到外部文件中。以上需要用到的“GenerateFlowFile”、“ReplaceText”、“PutFile”处理器。一、配置“GenerateFlowFile”处理器这个处理器可以生成随机的FlowFile数据或者生成自定义内容的FlowFile。多用于负载测试和模拟生成数据测试。1、拖拽“...
- 地球表面光谱1980-2019Bare Surfaces of the Earth该数据集使用谷歌地球引擎中的大地卫星图像，提供了30年的全球裸露表面面积和频率。地球表面的动态为指导环境和农业政策提供了基本信息。无遮盖和无保护的表面经历了一些不良影响，这可能会影响土壤生态系统的功能。我们开发了一种基于多时空遥感图像的技术来识别全球裸露的表面区域及其动态，以帮助对人类和自然现象进行时空评估... 地球表面光谱1980-2019Bare Surfaces of the Earth该数据集使用谷歌地球引擎中的大地卫星图像，提供了30年的全球裸露表面面积和频率。地球表面的动态为指导环境和农业政策提供了基本信息。无遮盖和无保护的表面经历了一些不良影响，这可能会影响土壤生态系统的功能。我们开发了一种基于多时空遥感图像的技术来识别全球裸露的表面区域及其动态，以帮助对人类和自然现象进行时空评估...
- 地形浮雕包括地球地形的垂直和水平变化，驱动着地貌学、生物地理学、气候学、水文学和生态学的进程。通过地貌测量和特征提取对其进行特征描述和评估，是众多环境建模和模拟分析的基础。因此，我们开发了Geomorpho90m全球数据集，包括从MERIT-数字高程模型（DEM）中提取的不同地貌特征，这是目前最好的全球高分辨率DEM。完全标准化的26个地貌变量由以下几层组成：(i) 使用一阶和二阶导数描... 地形浮雕包括地球地形的垂直和水平变化，驱动着地貌学、生物地理学、气候学、水文学和生态学的进程。通过地貌测量和特征提取对其进行特征描述和评估，是众多环境建模和模拟分析的基础。因此，我们开发了Geomorpho90m全球数据集，包括从MERIT-数字高程模型（DEM）中提取的不同地貌特征，这是目前最好的全球高分辨率DEM。完全标准化的26个地貌变量由以下几层组成：(i) 使用一阶和二阶导数描...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签