- RocketMQ 是阿里巴巴在 2012 年开源的分布式消息中间件，目前已经捐赠给 Apache 基金会，并于 2016 年 11 月成为 Apache 孵化项目。作为一款纯 java、分布式、队列模型的开源消息中间件，RocketMQ 支持事务消息、顺序消息、批量消息、定时消息、消息回溯等。 RocketMQ 是阿里巴巴在 2012 年开源的分布式消息中间件，目前已经捐赠给 Apache 基金会，并于 2016 年 11 月成为 Apache 孵化项目。作为一款纯 java、分布式、队列模型的开源消息中间件，RocketMQ 支持事务消息、顺序消息、批量消息、定时消息、消息回溯等。
- 在Redis中，集群模式（也称为Redis Cluster）是一种提供高可用性和数据分片的方法。它允许多个Redis节点通过网络连接协同工作，形成一个单一的大型数据库。这种模式特别适用于需要高可用性、可扩展性和数据分片的场景。是 Redis 官方提供的分布式解决方案，通过数据分片（Sharding）和高可用（High Availability）机制，实现水平扩展和故障自动转移。一、Redis... 在Redis中，集群模式（也称为Redis Cluster）是一种提供高可用性和数据分片的方法。它允许多个Redis节点通过网络连接协同工作，形成一个单一的大型数据库。这种模式特别适用于需要高可用性、可扩展性和数据分片的场景。是 Redis 官方提供的分布式解决方案，通过数据分片（Sharding）和高可用（High Availability）机制，实现水平扩展和故障自动转移。一、Redis...
- 单机Redis的读写速度非常快，能够支持大量用户的访问。虽然Redis的性能很高，但是对于大型网站来说，每秒需要获取的数据远远超过单台redis服务所能承受的压力，所以我们迫切需要一种方案能够解决单台Redis服务性能不足的问题。这就需要使用到Redis的集群了。Redis集群有多种方案，下面分别进行讲解。一、 主从复制Replicationredis支持主从复制的模式。在主从复制模式下Re... 单机Redis的读写速度非常快，能够支持大量用户的访问。虽然Redis的性能很高，但是对于大型网站来说，每秒需要获取的数据远远超过单台redis服务所能承受的压力，所以我们迫切需要一种方案能够解决单台Redis服务性能不足的问题。这就需要使用到Redis的集群了。Redis集群有多种方案，下面分别进行讲解。一、 主从复制Replicationredis支持主从复制的模式。在主从复制模式下Re...
- 2025年6月20~22日，华为开发者大会2025（HDC 2025）在东莞隆重举行。期间华为云举办了以“AI 原生中间件，构建应用运行的领先架构”为主题的专题论坛。论坛汇聚权威专家、技术先锋和开发者，共同探讨智能时代中间件的创新趋势、行业落地和未来趋势。 智能时代中间件技术演进与趋势前瞻论坛上，中国信息通信研究院专家姬海南为大家讲述了智能时代下中间件技术的演进与趋势。姬海南指出，随着国产化... 2025年6月20~22日，华为开发者大会2025（HDC 2025）在东莞隆重举行。期间华为云举办了以“AI 原生中间件，构建应用运行的领先架构”为主题的专题论坛。论坛汇聚权威专家、技术先锋和开发者，共同探讨智能时代中间件的创新趋势、行业落地和未来趋势。 智能时代中间件技术演进与趋势前瞻论坛上，中国信息通信研究院专家姬海南为大家讲述了智能时代下中间件技术的演进与趋势。姬海南指出，随着国产化...
- 一 分区的leader与follower1.1 Leader和Follower在Kafka中，每个topic都可以配置多个分区以及多个副本。每个分区都有一个leader以及0个或者多个follower，在创建topic时，Kafka会将每个分区的leader均匀地分配在每个broker上。我们正常使用kafka是感觉不到leader、follower的存在的。但其实，所有的读写操作都是由le... 一 分区的leader与follower1.1 Leader和Follower在Kafka中，每个topic都可以配置多个分区以及多个副本。每个分区都有一个leader以及0个或者多个follower，在创建topic时，Kafka会将每个分区的leader均匀地分配在每个broker上。我们正常使用kafka是感觉不到leader、follower的存在的。但其实，所有的读写操作都是由le...
- 一、Kafka-Eagle简介在开发工作中，当业务前提不复杂时，可以使用Kafka命令来进行一些集群的管理工作。但如果业务变得复杂，例如：我们需要增加group、topic分区，此时，我们再使用命令行就感觉很不方便，此时，如果使用一个可视化的工具帮助我们完成日常的管理工作，将会大大提高对于Kafka集群管理的效率，而且我们使用工具来监控消费者在Kafka中消费情况。早期，要监控Kafka集群... 一、Kafka-Eagle简介在开发工作中，当业务前提不复杂时，可以使用Kafka命令来进行一些集群的管理工作。但如果业务变得复杂，例如：我们需要增加group、topic分区，此时，我们再使用命令行就感觉很不方便，此时，如果使用一个可视化的工具帮助我们完成日常的管理工作，将会大大提高对于Kafka集群管理的效率，而且我们使用工具来监控消费者在Kafka中消费情况。早期，要监控Kafka集群...
- Apache Kafka 是一个分布式流处理平台，广泛应用于高吞吐量、低延迟的消息传递场景。其核心设计理念之一是通过 分区（Partition） 和 副本（Replica） 机制实现 水平扩展 和 高可用性。分区（Partition）：Kafka 的 Topic 可以划分为多个 Partition，每个 Partition 是一个有序的、不可变的消息序列，支持并行生产和消费，从而提升吞吐量。... Apache Kafka 是一个分布式流处理平台，广泛应用于高吞吐量、低延迟的消息传递场景。其核心设计理念之一是通过 分区（Partition） 和 副本（Replica） 机制实现 水平扩展 和 高可用性。分区（Partition）：Kafka 的 Topic 可以划分为多个 Partition，每个 Partition 是一个有序的、不可变的消息序列，支持并行生产和消费，从而提升吞吐量。...
- Kafka通过幂等生产者（Idempotent Producer）机制来实现消息的幂等性，确保每条消息在Kafka中只被处理一次，即使在生产者重试发送的情况下也不会导致重复消息。以下是Kafka实现幂等性的详细说明：1. 幂等生产者的基本概念 幂等性（Idempotence）：指操作的结果不会因为多次执行而改变。在Kafka中，幂等性确保每条消息在Topic的Partition中只被写入一次。 Kafka通过幂等生产者（Idempotent Producer）机制来实现消息的幂等性，确保每条消息在Kafka中只被处理一次，即使在生产者重试发送的情况下也不会导致重复消息。以下是Kafka实现幂等性的详细说明：1. 幂等生产者的基本概念 幂等性（Idempotence）：指操作的结果不会因为多次执行而改变。在Kafka中，幂等性确保每条消息在Topic的Partition中只被写入一次。
- 海量数据排序思路核心方案：外排序（分治+多路归并）MapReduce外排序是指数据量太大，无法全部加载到内存中，需要将数据分成多个小块进行排序，然后将排序后的小块合并成一个大的有序块 1.分块排序（Map阶段）分块策略按1G内存容量限制，将100G文件拆分为 200个500MB分块（保留内存用于排序计算和系统开销）内存排序每个分块加载至内存后：① 使用快速排序（时间复杂度O(n log n... 海量数据排序思路核心方案：外排序（分治+多路归并）MapReduce外排序是指数据量太大，无法全部加载到内存中，需要将数据分成多个小块进行排序，然后将排序后的小块合并成一个大的有序块 1.分块排序（Map阶段）分块策略按1G内存容量限制，将100G文件拆分为 200个500MB分块（保留内存用于排序计算和系统开销）内存排序每个分块加载至内存后：① 使用快速排序（时间复杂度O(n log n...
- 这是面试中经常问的一个场景题，主要考察研发的过往经验积累，需要系统性地回答，不能笼统简单敷衍。以下是整理的相关内容 1.排查思路总览 2.方法论面试问到这个问题，面试官其实想听到一些方法论的东西，并不想了解零零散散的排查过程。需要重点关注的点包括：结合业务场景（大促、双11促销、业务高峰期等）给出具体排查过程在阐述理论的同时，需结合工具的使用（Arthas、SkyWalking、Promet... 这是面试中经常问的一个场景题，主要考察研发的过往经验积累，需要系统性地回答，不能笼统简单敷衍。以下是整理的相关内容 1.排查思路总览 2.方法论面试问到这个问题，面试官其实想听到一些方法论的东西，并不想了解零零散散的排查过程。需要重点关注的点包括：结合业务场景（大促、双11促销、业务高峰期等）给出具体排查过程在阐述理论的同时，需结合工具的使用（Arthas、SkyWalking、Promet...
- Kafka 是一个高吞吐量、高性能的消息中间件，关于 Kafka 高性能背后的实现，是大厂面试高频问题。本篇全面详解 Kafka 高性能背后的实现。关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。 Kafka 是一个高吞吐量、高性能的消息中间件，关于 Kafka 高性能背后的实现，是大厂面试高频问题。本篇全面详解 Kafka 高性能背后的实现。关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。
- 本文详细解析了 RocketMQ 的核心架构、消息领域模型、关键特性和应用场景，帮助深入理解消息中间件的工作原理。关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。 本文详细解析了 RocketMQ 的核心架构、消息领域模型、关键特性和应用场景，帮助深入理解消息中间件的工作原理。关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。
- 本文详细解析了 Kafka 的核心架构和实现原理，消息中间件是亿级互联网架构的基石，大厂面试高频，非常重要，建议收藏。关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。 本文详细解析了 Kafka 的核心架构和实现原理，消息中间件是亿级互联网架构的基石，大厂面试高频，非常重要，建议收藏。关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。
- 基于华为云服务器ECS与消息中间件rabbitmq，实现一个中间件插件平台，以满足多云间存储数据的同步。 基于华为云服务器ECS与消息中间件rabbitmq，实现一个中间件插件平台，以满足多云间存储数据的同步。
上滑加载中
推荐直播
-
昇腾AI算法挑战赛-核心算子如何优化？专家带你深度解析2025/11/17 周一 16:00-17:00
王老师 华为算子专家
昇腾AI算法挑战赛进阶赛战鼓催征！本期直播间，我们特邀华为算子专家王老师，为你深度剖析Matmul、wholereducesum等核心算子的底层原理与优化技巧，直击赛题核心。想提升代码效率、冲击更高排名？锁定直播，带你破局！
回顾中 -
AI编码实干派，“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国，深圳，2026年2月26日】，以“AI编码实干派，码力全开”为主题的华为云码道（CodeArts）代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布，为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw，开启在线养虾模式2026/03/11 周三 19:00-20:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中
热门标签