- MapReduce是一个并行计算软件框架,，一个MapReduce作业（application/job）通常会把输入的数据集切分为若干独立的数据块，由map任务（task）以完全并行的方式来处理。框架会对map的输出先进行排序，然后把结果输入给reduce任务，最后返回给客户端。本文介绍MapReduce任务提交样例。 MapReduce是一个并行计算软件框架,，一个MapReduce作业（application/job）通常会把输入的数据集切分为若干独立的数据块，由map任务（task）以完全并行的方式来处理。框架会对map的输出先进行排序，然后把结果输入给reduce任务，最后返回给客户端。本文介绍MapReduce任务提交样例。
- HDFS（Hadoop Distribute FileSystem）是一个适合运行在通用硬件之上，具备高度容错特性，支持高吞吐量数据访问的分布式文件系统，非常适合大规模数据集应用。本文介绍HDFS二次开发调用样例介绍 HDFS（Hadoop Distribute FileSystem）是一个适合运行在通用硬件之上，具备高度容错特性，支持高吞吐量数据访问的分布式文件系统，非常适合大规模数据集应用。本文介绍HDFS二次开发调用样例介绍
- MRS二次开发介绍 MRS二次开发介绍
- 我们的项目是DAYU平台的数据开发（DLF）。数据开发中一个重要的功能就是ETL（数据清洗）。ETL由源端到目的端，中间的业务逻辑一般由用户自己编写的SQL模板实现。velocity是其中涉及的一种模板语言。关于velocity：https://velocity.apache.org/ 我们的项目是DAYU平台的数据开发（DLF）。数据开发中一个重要的功能就是ETL（数据清洗）。ETL由源端到目的端，中间的业务逻辑一般由用户自己编写的SQL模板实现。velocity是其中涉及的一种模板语言。关于velocity：https://velocity.apache.org/
- 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke... 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke...
- 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str... 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str...
- 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.com/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑... 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.com/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑...
- DWS开发指导 DWS开发指导
- DWS参数调优相关参数介绍 DWS参数调优相关参数介绍
- 1 说明1.1 背景介绍DWS使用一段时间后会产生一定脏页数据，从性能、空间角度考虑需要对脏页空间进行释放。目前在以下几种情况出现概率较高，本文档主要为实际操作可能遇到的问题提供技术参考。情况1：DWS任务多，包含临时表操作，导致脏页统计的视图运行报错。情况2：DWS数据量大，使用默认系统视图统计脏页执行时间长。1.2 VACUUM FULL介绍VACUU... 1 说明1.1 背景介绍DWS使用一段时间后会产生一定脏页数据，从性能、空间角度考虑需要对脏页空间进行释放。目前在以下几种情况出现概率较高，本文档主要为实际操作可能遇到的问题提供技术参考。情况1：DWS任务多，包含临时表操作，导致脏页统计的视图运行报错。情况2：DWS数据量大，使用默认系统视图统计脏页执行时间长。1.2 VACUUM FULL介绍VACUU...
- 第一次用华为云的 EI OCR 服务，以消费者视角体验了 AI + 微服务，忍不住说一点感想。快捷易用我试用的是 EI 企业智能板块的 OCR 光学文字识别服务。从申请账号开始，到第一个车牌识别调用成功总共耗时20分钟，我一边做一边看产品文档，没有一味追求速度。整体流程很顺畅，流程合理直接。但让我意外的是，耗时最久，体验最差的环节是申请api token。token 是访问一个服务的信令，需... 第一次用华为云的 EI OCR 服务，以消费者视角体验了 AI + 微服务，忍不住说一点感想。快捷易用我试用的是 EI 企业智能板块的 OCR 光学文字识别服务。从申请账号开始，到第一个车牌识别调用成功总共耗时20分钟，我一边做一边看产品文档，没有一味追求速度。整体流程很顺畅，流程合理直接。但让我意外的是，耗时最久，体验最差的环节是申请api token。token 是访问一个服务的信令，需...
- 简单介绍TCP协议中的KeepAlive 简单介绍TCP协议中的KeepAlive
- 数据库工作负载管理功能(WLM)是管理混合负载、提升集群吞吐率的利器。GaussDB(DWS)也提供了强大的工作负载管理能力，但由于工作负载管理的使用和具体业务诉求强相关，不少小伙伴在配置时存在一些困惑，因此我们将GaussDB(DWS)工作负载管理功能的基本使用方法进行介绍，并辅以两个实战案例进行介绍，方便小伙伴们更好的利用工作负载管理功能，达到事半功倍的效果。 数据库工作负载管理功能(WLM)是管理混合负载、提升集群吞吐率的利器。GaussDB(DWS)也提供了强大的工作负载管理能力，但由于工作负载管理的使用和具体业务诉求强相关，不少小伙伴在配置时存在一些困惑，因此我们将GaussDB(DWS)工作负载管理功能的基本使用方法进行介绍，并辅以两个实战案例进行介绍，方便小伙伴们更好的利用工作负载管理功能，达到事半功倍的效果。
- 上一篇博文《GaussDB(DWS)性能调优系列实战篇五：十八般武艺之路径干预》中介绍了如何通过设置GUC参数，对优化器生成路径进行全局干预。本文介绍另一种只针对当前SQL生效的对优化器生成路径进行干预的方法--plan hint。 上一篇博文《GaussDB(DWS)性能调优系列实战篇五：十八般武艺之路径干预》中介绍了如何通过设置GUC参数，对优化器生成路径进行全局干预。本文介绍另一种只针对当前SQL生效的对优化器生成路径进行干预的方法--plan hint。
- HDFS全称Hadoop distributed file system，简称HDFS，是一个分布式文件系统。它是谷歌的GFS提出之后出现的另外一种文件系统。它有一定高度的容错性，而且提供了高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS 提供了一个高度容错性和高吞吐量的海量数据存储解决方案。 HDFS全称Hadoop distributed file system，简称HDFS，是一个分布式文件系统。它是谷歌的GFS提出之后出现的另外一种文件系统。它有一定高度的容错性，而且提供了高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS 提供了一个高度容错性和高吞吐量的海量数据存储解决方案。
上滑加载中
推荐直播
-
AI编码实干派，“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国，深圳，2026年2月26日】，以“AI编码实干派，码力全开”为主题的华为云码道（CodeArts）代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布，为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw，在线养虾2026/03/11 周三 19:00-21:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力，华为云开发者生态运营总监/姚圣伟，华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发，看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw，让小艺成为你的AI助理。
回顾中
热门标签