- 再谈消息队列技术 上周,我们举办了第二届技术沙龙,我这边主要演讲了消息队列技术的议题,现分享给大家: 在我们团队内部,随着消息应用中心(任务中心)的广泛应用,有时候我们感觉不到消息队列的存在,但这不影响消息队列在高可用、分布式、高并发架构下的核心地位。 消息队列都应用到了哪些实际的应用场景中? 一、再谈消息队列的应用场景 异步... 再谈消息队列技术 上周,我们举办了第二届技术沙龙,我这边主要演讲了消息队列技术的议题,现分享给大家: 在我们团队内部,随着消息应用中心(任务中心)的广泛应用,有时候我们感觉不到消息队列的存在,但这不影响消息队列在高可用、分布式、高并发架构下的核心地位。 消息队列都应用到了哪些实际的应用场景中? 一、再谈消息队列的应用场景 异步...
- filebeat.inputs: - type: log paths: - /home/resource/project/upload/logs/userorderinfo_*.log fields:  ... filebeat.inputs: - type: log paths: - /home/resource/project/upload/logs/userorderinfo_*.log fields:  ...
- 一、KafKa副本消息同步策略 在开始前需要了解两个概念:LEO 和 HW : LEO: 该副本数据最后一个offset提交的位置,最大offset值。HW: 高水位线 消费者能够消费最大的offse... 一、KafKa副本消息同步策略 在开始前需要了解两个概念:LEO 和 HW : LEO: 该副本数据最后一个offset提交的位置,最大offset值。HW: 高水位线 消费者能够消费最大的offse...
- 一、KafKa控制器作用 在 kafka 中分为 broker 和 partition 分区,其中分区副本在前几篇文章中都进行了讲解,本篇文章针对 broker 进行分析,其中在 kafka 集群中,一... 一、KafKa控制器作用 在 kafka 中分为 broker 和 partition 分区,其中分区副本在前几篇文章中都进行了讲解,本篇文章针对 broker 进行分析,其中在 kafka 集群中,一...
- 一、KafKa分区副本ISR选举机制 kafka 中每一个主题又进一步划分成若干个分区。副本的概念实际上是在分区层级下定义的,每个分区配置有多若干个副本。 所谓的副本,本质上就是一个只能追加写消息的提... 一、KafKa分区副本ISR选举机制 kafka 中每一个主题又进一步划分成若干个分区。副本的概念实际上是在分区层级下定义的,每个分区配置有多若干个副本。 所谓的副本,本质上就是一个只能追加写消息的提...
- 前景连接: Hadoop HA部署(MINI版)https://blog.csdn.net/m0_54925305/article/details/121566611?spm=1001.2014.3001.5501https://blog.csdn.net/m0_54925305/article/details/121566611?s... 前景连接: Hadoop HA部署(MINI版)https://blog.csdn.net/m0_54925305/article/details/121566611?spm=1001.2014.3001.5501https://blog.csdn.net/m0_54925305/article/details/121566611?s...
- 1.kafka维护的一些命令: 1.1创建topic kafka-topics.sh --create --partitions 1 --replication-factor 2 --topic te... 1.kafka维护的一些命令: 1.1创建topic kafka-topics.sh --create --partitions 1 --replication-factor 2 --topic te...
- 环境准备: centos 7 zookeeper正常运行 kafka_2.11-1.0.0.tgz 环境搭建: 一、安装: 1、免费下载: kafka_2.11-1.0.0.tgz.zip-Linux文档类资源-CSDN下载kafka_2.11-1.0.0.tgz.z... 环境准备: centos 7 zookeeper正常运行 kafka_2.11-1.0.0.tgz 环境搭建: 一、安装: 1、免费下载: kafka_2.11-1.0.0.tgz.zip-Linux文档类资源-CSDN下载kafka_2.11-1.0.0.tgz.z...
- 大家好,我是梦想家Alex,今天为大家带来面试过程中关于 Kafka 核心知识灵魂 16 问 ~ 内容较丰富... 大家好,我是梦想家Alex,今天为大家带来面试过程中关于 Kafka 核心知识灵魂 16 问 ~ 内容较丰富...
- kafka是apache基金会管理的开源流处理平台(官网http://kafka.apache.org/),但国内大多数人对其认知基本都是消息队列,所以我们先来了解下什么是消息队列。 消息队列 消... kafka是apache基金会管理的开源流处理平台(官网http://kafka.apache.org/),但国内大多数人对其认知基本都是消息队列,所以我们先来了解下什么是消息队列。 消息队列 消...
- 很多人在做架构设计时往往会“过度设计”,简单问题复杂化,上来就引一堆中间件,我想大概原因主要有下面两点: 为了秀(学)技术而架构 我们常说技术是为业务服务的,不能为了技术而技术,为了秀技术引入一堆复... 很多人在做架构设计时往往会“过度设计”,简单问题复杂化,上来就引一堆中间件,我想大概原因主要有下面两点: 为了秀(学)技术而架构 我们常说技术是为业务服务的,不能为了技术而技术,为了秀技术引入一堆复...
- 本文字数:4223字 预计阅读时间:13分钟 一、RocketMQ简介 RocketMQ是一个高可用、高性能、高可靠的分布式消息队列,相对于kafka更适合处理业务系统之间的消息。 它具有很多特性,例如:发布订阅顺序、事务、定时消息消息堆积、重试,回溯等等 它通过同步刷盘和同步双写等技术手段来实现高可靠,保证如... 本文字数:4223字 预计阅读时间:13分钟 一、RocketMQ简介 RocketMQ是一个高可用、高性能、高可靠的分布式消息队列,相对于kafka更适合处理业务系统之间的消息。 它具有很多特性,例如:发布订阅顺序、事务、定时消息消息堆积、重试,回溯等等 它通过同步刷盘和同步双写等技术手段来实现高可靠,保证如...
- 前言 金三银四即将来临,整理了十道十分经典的消息队列面试题,看完肯定对面试有帮助的,大家一起加油哈~ 什么是消息队列消息队列的应用场景消息队列如何解决消息丢失问题消息队列如何保证消息的顺序性。消息有可能发生重复消费吗?如何幂等处理?如何处理消息队列的消息积压问题消息队列技术选型,Kafka还是RocketMQ,还是Rabbi... 前言 金三银四即将来临,整理了十道十分经典的消息队列面试题,看完肯定对面试有帮助的,大家一起加油哈~ 什么是消息队列消息队列的应用场景消息队列如何解决消息丢失问题消息队列如何保证消息的顺序性。消息有可能发生重复消费吗?如何幂等处理?如何处理消息队列的消息积压问题消息队列技术选型,Kafka还是RocketMQ,还是Rabbi...
- ELK+Kafka+Filebeat日志系统 文章目录 ELK+Kafka+Filebeat日志系统1.环境规划2.部署elasticsearch集群2.1.配置es-1节点2.2.配置es-2... ELK+Kafka+Filebeat日志系统 文章目录 ELK+Kafka+Filebeat日志系统1.环境规划2.部署elasticsearch集群2.1.配置es-1节点2.2.配置es-2...
- 1.问题描述 使用kafka命令删除某个topic之后,查看集群的topic列表时,被删除的tpoic依然存在 # /data/kafka/bin/kafka-topics.sh --delete -... 1.问题描述 使用kafka命令删除某个topic之后,查看集群的topic列表时,被删除的tpoic依然存在 # /data/kafka/bin/kafka-topics.sh --delete -...
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签