- Job和CronJob是负责批量处理短暂的一次性任务（short lived one-off tasks），即仅执行一次的任务，它保证批处理任务的一个或多个Pod成功结束。Job：是Kubernetes用来控制批处理型任务的资源对象。批处理业务与长期伺服业务（Deployment、Statefulset）的主要区别是批处理业务的运行有头有尾，而长期伺服业务在用户不停止的情况下永远运行。Job... Job和CronJob是负责批量处理短暂的一次性任务（short lived one-off tasks），即仅执行一次的任务，它保证批处理任务的一个或多个Pod成功结束。Job：是Kubernetes用来控制批处理型任务的资源对象。批处理业务与长期伺服业务（Deployment、Statefulset）的主要区别是批处理业务的运行有头有尾，而长期伺服业务在用户不停止的情况下永远运行。Job...
- 继上篇在华为云编译和使用单点的ClickHouse，本篇博文会向大家分享MRS集群上配置部署ClickHouse服务，是ClickHouse集群：） 继上篇在华为云编译和使用单点的ClickHouse，本篇博文会向大家分享MRS集群上配置部署ClickHouse服务，是ClickHouse集群：）
- 1 前言大家好，今天继续向各位分享在华为云上编译和使用ClickHouse，这里会以单节点为例，后续会有系列博文介绍怎样部署集群和使用，欢迎持续关注^_^2 准备工作在开始本文之前，建议在华为云购买一台云服务器，同时考虑到后续的顺利操作，云服务器需要有一些要求：CPU架构：x86计算规格：c6.2xlarge.4，如果想编译快一点尽量提高CPU的核数镜像：公共镜像，CentOS CentOS... 1 前言大家好，今天继续向各位分享在华为云上编译和使用ClickHouse，这里会以单节点为例，后续会有系列博文介绍怎样部署集群和使用，欢迎持续关注^_^2 准备工作在开始本文之前，建议在华为云购买一台云服务器，同时考虑到后续的顺利操作，云服务器需要有一些要求：CPU架构：x86计算规格：c6.2xlarge.4，如果想编译快一点尽量提高CPU的核数镜像：公共镜像，CentOS CentOS...
- 为了应对数据极速增长带来的多样性业务诉求，华为云CTO张宇昕在峰会上重磅发布了华为云FusionInsight新一代智能数据湖，通过一云一湖两引擎，使能数据治理和运营，释放海量数据价值。 为了应对数据极速增长带来的多样性业务诉求，华为云CTO张宇昕在峰会上重磅发布了华为云FusionInsight新一代智能数据湖，通过一云一湖两引擎，使能数据治理和运营，释放海量数据价值。
- 本博客主要介绍华为FusionInsight MRS补丁安装相关流程，以及注意事项。 本博客主要介绍华为FusionInsight MRS补丁安装相关流程，以及注意事项。
- 本章主要介绍华为FusionInsight MRS 版本升级相关流程，以及注意事项。 本章主要介绍华为FusionInsight MRS 版本升级相关流程，以及注意事项。
- Hive是建立在Hadoop上的数据仓库框架，提供类似SQL的HiveQL语言操作结构化数 据，其基本原理是将HiveQL语言自动转换成MapReduce或HDFS任务，从而完成对 Hadoop集群中存储的海量数据进行查询和分析。Console控制台提供了Hive Script输 入入口，支持在线提交HiveQL语句。支持 HDFS Colocation HDFS Coloca... Hive是建立在Hadoop上的数据仓库框架，提供类似SQL的HiveQL语言操作结构化数 据，其基本原理是将HiveQL语言自动转换成MapReduce或HDFS任务，从而完成对 Hadoop集群中存储的海量数据进行查询和分析。Console控制台提供了Hive Script输 入入口，支持在线提交HiveQL语句。支持 HDFS Colocation HDFS Coloca...
- CarbonData是一种新型的Apache Hadoop文件格式，使用先进的列式存储、索引、压 缩和编码技术，将数据保存在HDFS中以提高计算效率，有助于加速超过PB数量级的数 据查询，可用于更快的交互查询。同时，CarbonData也是一种将数据源与Spark集成 的高性能分析引擎，用户可使用Spark SQL执行数据查询和分析。 CarbonData主要支持以下特性： ● SQL功能 ... CarbonData是一种新型的Apache Hadoop文件格式，使用先进的列式存储、索引、压 缩和编码技术，将数据保存在HDFS中以提高计算效率，有助于加速超过PB数量级的数 据查询，可用于更快的交互查询。同时，CarbonData也是一种将数据源与Spark集成 的高性能分析引擎，用户可使用Spark SQL执行数据查询和分析。 CarbonData主要支持以下特性： ● SQL功能 ...
- Kudu是专为Apache Hadoop平台开发的列式存储管理器，具有Hadoop生态系统应用 程序的共同技术特性：在通用的商用硬件上运行，可水平扩展，提供高可用性。 Kudu的设计具有以下优点： ● 能够快速处理OLAP工作负载 ● 支持与MapReduce，Spark和其他Hadoop生态系统组件集成 ● 与Apache Impala的紧密集成，使其成为将HDFS与Apache Parq... Kudu是专为Apache Hadoop平台开发的列式存储管理器，具有Hadoop生态系统应用 程序的共同技术特性：在通用的商用硬件上运行，可水平扩展，提供高可用性。 Kudu的设计具有以下优点： ● 能够快速处理OLAP工作负载 ● 支持与MapReduce，Spark和其他Hadoop生态系统组件集成 ● 与Apache Impala的紧密集成，使其成为将HDFS与Apache Parq...
- 实现Kerberos认证集群与开源elasticsearch对接 实现Kerberos认证集群与开源elasticsearch对接
- DAYU数据开发常见问题解答，持续更新~ DAYU数据开发常见问题解答，持续更新~
- 近期，华为云FusionInsight MRS成功突破单集群2万+节点，刷新业内记录。超大规模单集群彻底解决了多系统烟囱林立的局面，消除数据孤岛，减少数据冗余，还能为数据分析的时效性提供保障，加速数据价值变现。 近期，华为云FusionInsight MRS成功突破单集群2万+节点，刷新业内记录。超大规模单集群彻底解决了多系统烟囱林立的局面，消除数据孤岛，减少数据冗余，还能为数据分析的时效性提供保障，加速数据价值变现。
- Presto可以连接mysql、hive、kudu等多种存储引擎。MRS集群上的Presto预设配置了hive、jmx、tpcds、tpch四种connector，下面以kudu为例子，来实践一下，如何添加一个connector。 Presto可以连接mysql、hive、kudu等多种存储引擎。MRS集群上的Presto预设配置了hive、jmx、tpcds、tpch四种connector，下面以kudu为例子，来实践一下，如何添加一个connector。
- 获取MRS最新样例代码文件。华为云MRS服务2.0版本的样例工程下载地址为：huaweicloud-mrs-example。本地已安装IntelliJ IDEA、JDK、Maven等必备软件。配置华为云镜像站中SDK的Maven镜像仓库，可参考华为云开源镜像配置方式。注意如果本地需配置代理上网，在Maven配置文件“settings.xml”的<proxy></proxy>字段中需配置相关代... 获取MRS最新样例代码文件。华为云MRS服务2.0版本的样例工程下载地址为：huaweicloud-mrs-example。本地已安装IntelliJ IDEA、JDK、Maven等必备软件。配置华为云镜像站中SDK的Maven镜像仓库，可参考华为云开源镜像配置方式。注意如果本地需配置代理上网，在Maven配置文件“settings.xml”的<proxy></proxy>字段中需配置相关代...
- Hive 内存溢出问题解决方案l Mapper/Reducer阶段JVM内存溢出1. Java.lang.OutOfMemoryError: GC overhead limit exceeded;2. Error: java heapspace3. running beyondphysical memory limits.Current usage: 4... Hive 内存溢出问题解决方案l Mapper/Reducer阶段JVM内存溢出1. Java.lang.OutOfMemoryError: GC overhead limit exceeded;2. Error: java heapspace3. running beyondphysical memory limits.Current usage: 4...
上滑加载中
推荐直播
-
华为云码道-玩转OpenClaw，在线养虾2026/03/11 周三 19:00-21:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力，华为云开发者生态运营总监/姚圣伟，华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发，看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw，让小艺成为你的AI助理。
回顾中 -
Skill 构建 × 智能创作：基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟，华为云软件研发工程师/万邵业（万少），华为云HCDE开发者专家
本次直播带来两大实战：华为云码道 Skill-Creator 手把手搭建专属知识库 Skill；如何用码道提效 OpenClaw 小说文本，打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路，一次讲透！
回顾中
热门标签