- Hive是一个开源的，建立在Hadoop上的数据仓库框架，提供类似SQL的HQL语言操作结构化数据，其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务，从而完成对Hadoop集群中存储的海量数据进行查询和分析。本文介绍Hive的HCatalog接口调用样例。 Hive是一个开源的，建立在Hadoop上的数据仓库框架，提供类似SQL的HQL语言操作结构化数据，其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务，从而完成对Hadoop集群中存储的海量数据进行查询和分析。本文介绍Hive的HCatalog接口调用样例。
- MapReduce是一个并行计算软件框架,，一个MapReduce作业（application/job）通常会把输入的数据集切分为若干独立的数据块，由map任务（task）以完全并行的方式来处理。框架会对map的输出先进行排序，然后把结果输入给reduce任务，最后返回给客户端。本文介绍MapReduce多组件样例。 MapReduce是一个并行计算软件框架,，一个MapReduce作业（application/job）通常会把输入的数据集切分为若干独立的数据块，由map任务（task）以完全并行的方式来处理。框架会对map的输出先进行排序，然后把结果输入给reduce任务，最后返回给客户端。本文介绍MapReduce多组件样例。
- MapReduce是一个并行计算软件框架,，一个MapReduce作业（application/job）通常会把输入的数据集切分为若干独立的数据块，由map任务（task）以完全并行的方式来处理。框架会对map的输出先进行排序，然后把结果输入给reduce任务，最后返回给客户端。本文介绍MapReduce任务提交样例。 MapReduce是一个并行计算软件框架,，一个MapReduce作业（application/job）通常会把输入的数据集切分为若干独立的数据块，由map任务（task）以完全并行的方式来处理。框架会对map的输出先进行排序，然后把结果输入给reduce任务，最后返回给客户端。本文介绍MapReduce任务提交样例。
- HDFS（Hadoop Distribute FileSystem）是一个适合运行在通用硬件之上，具备高度容错特性，支持高吞吐量数据访问的分布式文件系统，非常适合大规模数据集应用。本文介绍HDFS二次开发调用样例介绍 HDFS（Hadoop Distribute FileSystem）是一个适合运行在通用硬件之上，具备高度容错特性，支持高吞吐量数据访问的分布式文件系统，非常适合大规模数据集应用。本文介绍HDFS二次开发调用样例介绍
- MRS二次开发介绍 MRS二次开发介绍
- 我们的项目是DAYU平台的数据开发（DLF）。数据开发中一个重要的功能就是ETL（数据清洗）。ETL由源端到目的端，中间的业务逻辑一般由用户自己编写的SQL模板实现。velocity是其中涉及的一种模板语言。关于velocity：https://velocity.apache.org/ 我们的项目是DAYU平台的数据开发（DLF）。数据开发中一个重要的功能就是ETL（数据清洗）。ETL由源端到目的端，中间的业务逻辑一般由用户自己编写的SQL模板实现。velocity是其中涉及的一种模板语言。关于velocity：https://velocity.apache.org/
- 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke... 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke...
- 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str... 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str...
- 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.com/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑... 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.com/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑...
- DWS开发指导 DWS开发指导
- DWS参数调优相关参数介绍 DWS参数调优相关参数介绍
- 1 说明1.1 背景介绍DWS使用一段时间后会产生一定脏页数据，从性能、空间角度考虑需要对脏页空间进行释放。目前在以下几种情况出现概率较高，本文档主要为实际操作可能遇到的问题提供技术参考。情况1：DWS任务多，包含临时表操作，导致脏页统计的视图运行报错。情况2：DWS数据量大，使用默认系统视图统计脏页执行时间长。1.2 VACUUM FULL介绍VACUU... 1 说明1.1 背景介绍DWS使用一段时间后会产生一定脏页数据，从性能、空间角度考虑需要对脏页空间进行释放。目前在以下几种情况出现概率较高，本文档主要为实际操作可能遇到的问题提供技术参考。情况1：DWS任务多，包含临时表操作，导致脏页统计的视图运行报错。情况2：DWS数据量大，使用默认系统视图统计脏页执行时间长。1.2 VACUUM FULL介绍VACUU...
- 第一次用华为云的 EI OCR 服务，以消费者视角体验了 AI + 微服务，忍不住说一点感想。快捷易用我试用的是 EI 企业智能板块的 OCR 光学文字识别服务。从申请账号开始，到第一个车牌识别调用成功总共耗时20分钟，我一边做一边看产品文档，没有一味追求速度。整体流程很顺畅，流程合理直接。但让我意外的是，耗时最久，体验最差的环节是申请api token。token 是访问一个服务的信令，需... 第一次用华为云的 EI OCR 服务，以消费者视角体验了 AI + 微服务，忍不住说一点感想。快捷易用我试用的是 EI 企业智能板块的 OCR 光学文字识别服务。从申请账号开始，到第一个车牌识别调用成功总共耗时20分钟，我一边做一边看产品文档，没有一味追求速度。整体流程很顺畅，流程合理直接。但让我意外的是，耗时最久，体验最差的环节是申请api token。token 是访问一个服务的信令，需...
- 简单介绍TCP协议中的KeepAlive 简单介绍TCP协议中的KeepAlive
- 数据库工作负载管理功能(WLM)是管理混合负载、提升集群吞吐率的利器。GaussDB(DWS)也提供了强大的工作负载管理能力，但由于工作负载管理的使用和具体业务诉求强相关，不少小伙伴在配置时存在一些困惑，因此我们将GaussDB(DWS)工作负载管理功能的基本使用方法进行介绍，并辅以两个实战案例进行介绍，方便小伙伴们更好的利用工作负载管理功能，达到事半功倍的效果。 数据库工作负载管理功能(WLM)是管理混合负载、提升集群吞吐率的利器。GaussDB(DWS)也提供了强大的工作负载管理能力，但由于工作负载管理的使用和具体业务诉求强相关，不少小伙伴在配置时存在一些困惑，因此我们将GaussDB(DWS)工作负载管理功能的基本使用方法进行介绍，并辅以两个实战案例进行介绍，方便小伙伴们更好的利用工作负载管理功能，达到事半功倍的效果。
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签