- 因为redis是内存数据库，他把数据都存在内存里，所以要想办法实现持久化功能。 RDB RDB持久化可以手动执行，也可以配置定期执行，可以把某个时间的数据状态保存到RDB文件中，反之，我们可以用RDB文件还原数据库状态。 生成 有两个命令可以生成RDB文件： SAVE 命令由服务器进程直接执行保存操作，所以该命令会阻塞服务器，服... 因为redis是内存数据库，他把数据都存在内存里，所以要想办法实现持久化功能。 RDB RDB持久化可以手动执行，也可以配置定期执行，可以把某个时间的数据状态保存到RDB文件中，反之，我们可以用RDB文件还原数据库状态。 生成 有两个命令可以生成RDB文件： SAVE 命令由服务器进程直接执行保存操作，所以该命令会阻塞服务器，服...
- Redis 事务可以一次执行多个命令， 并且带有以下三个重要的保证： 批量操作在发送 EXEC 命令前被放入队列缓存。收到 EXEC 命令后进入事务执行，事务中任意命令执行失败，其余的命令依然被执行。在事务执行过程，其他客户端提交的命令请求不会插入到事务执行命令序列中。 一个事务从开始到执行会经历以下三个阶段： 开始事务。命令入队。执行事务。 以下是一个事务的例子， 它先... Redis 事务可以一次执行多个命令， 并且带有以下三个重要的保证： 批量操作在发送 EXEC 命令前被放入队列缓存。收到 EXEC 命令后进入事务执行，事务中任意命令执行失败，其余的命令依然被执行。在事务执行过程，其他客户端提交的命令请求不会插入到事务执行命令序列中。 一个事务从开始到执行会经历以下三个阶段： 开始事务。命令入队。执行事务。 以下是一个事务的例子， 它先...
- 4、整数集合 整数集合（intset）是 Redis 用于保存整数值的集合抽象数据结构， 可以保存 int16_t 、 int32_t 、 int64_t 的整数值， 并且保证集合中不会出现重复元素。 实现较为简单： typedef struct intset { // 编码方式 uint32_t encoding; // 集合包含的元素数量 uint32_t leng... 4、整数集合 整数集合（intset）是 Redis 用于保存整数值的集合抽象数据结构， 可以保存 int16_t 、 int32_t 、 int64_t 的整数值， 并且保证集合中不会出现重复元素。 实现较为简单： typedef struct intset { // 编码方式 uint32_t encoding; // 集合包含的元素数量 uint32_t leng...
- scrapy_redis概念作用和流程 学习目标 了解 分布式的概念及特点了解 scarpy_redis的概念了解 scrapy_redis的作用了解 scrapy_redis的工作流程 在前面scrapy框架中我们已经能够使用框架实现爬虫爬取网站数据,如果当前网站的数据比较庞大, 我们就需要使用分布式来更快的爬取数据 1. 分布式是什么 ... scrapy_redis概念作用和流程 学习目标 了解 分布式的概念及特点了解 scarpy_redis的概念了解 scrapy_redis的作用了解 scrapy_redis的工作流程 在前面scrapy框架中我们已经能够使用框架实现爬虫爬取网站数据,如果当前网站的数据比较庞大, 我们就需要使用分布式来更快的爬取数据 1. 分布式是什么 ...
- sync虽然解决了数据同步问题，但是在数据量比较大情况下，从库断线从来依然采用全量复制机制，无论是从数据恢复、宽带占用来说，sync所带来的问题还是很多的。于是redis从2.8开始，引入新的命令psync。 psync有两种模式：完整重同步和部分重同步。 部分重同步主要依赖三个方面来实现，依次介绍。 offset（复制偏移量）： 主库和从库分别各自维护一个复制偏移量... sync虽然解决了数据同步问题，但是在数据量比较大情况下，从库断线从来依然采用全量复制机制，无论是从数据恢复、宽带占用来说，sync所带来的问题还是很多的。于是redis从2.8开始，引入新的命令psync。 psync有两种模式：完整重同步和部分重同步。 部分重同步主要依赖三个方面来实现，依次介绍。 offset（复制偏移量）： 主库和从库分别各自维护一个复制偏移量...
- 频道的订阅和退订 当一个客户端执行 SUBSCRIBE 命令， 订阅某个或某些频道的时候， 这个客户端与被订阅频道之间就建立起了一种订阅关系。 Redis 将所有频道的订阅关系都保存在服务器状态的 pubsub_channels 字典里面， 这个字典的键是某个被订阅的频道， 而键的值则是一个链表， 链表里面记录了所有订阅这个频道的客... 频道的订阅和退订 当一个客户端执行 SUBSCRIBE 命令， 订阅某个或某些频道的时候， 这个客户端与被订阅频道之间就建立起了一种订阅关系。 Redis 将所有频道的订阅关系都保存在服务器状态的 pubsub_channels 字典里面， 这个字典的键是某个被订阅的频道， 而键的值则是一个链表， 链表里面记录了所有订阅这个频道的客...
- redis服务器将所有数据库都保存在redis/redisServer中，数组db存放所有数据库，每一项是一个redisdb结构。dbnum代表数据库数量。 客户端有一个指针指向当前数据库，可以切换，也就是移动指针。 键空间 现在稍微介绍一下redisdb结构，它的字典保存了所有键值对 键空间的键也就是数据库的键， 每个键都是一个字符串对象。 键空间的值也就是数据库... redis服务器将所有数据库都保存在redis/redisServer中，数组db存放所有数据库，每一项是一个redisdb结构。dbnum代表数据库数量。 客户端有一个指针指向当前数据库，可以切换，也就是移动指针。 键空间 现在稍微介绍一下redisdb结构，它的字典保存了所有键值对 键空间的键也就是数据库的键， 每个键都是一个字符串对象。 键空间的值也就是数据库...
- 点赞功能随处可见，我们都知道点赞是一个非常高频的操作，redis就非常适合做这种工作。 实现效果： 分析：三种类型：给帖子点赞，给评论点赞，给回复点赞 我们只实现查看点赞数量的话，只要一个int记录一下就可以，但是我们之后还想查看点赞的人，所以要把每一个点赞的信息都记录好，方便后面的功能继续做出来。 思路： 点赞：把点赞的信息放进去。 取消：把点赞的信息删除。... 点赞功能随处可见，我们都知道点赞是一个非常高频的操作，redis就非常适合做这种工作。 实现效果： 分析：三种类型：给帖子点赞，给评论点赞，给回复点赞 我们只实现查看点赞数量的话，只要一个int记录一下就可以，但是我们之后还想查看点赞的人，所以要把每一个点赞的信息都记录好，方便后面的功能继续做出来。 思路： 点赞：把点赞的信息放进去。 取消：把点赞的信息删除。...
- Redis 的复制功能分为同步（sync）和命令传播（command propagate）两个操作： 同步操作用于将从服务器的数据库状态更新至主服务器当前所处的数据库状态。命令传播操作用于在主服务器的数据库状态被修改， 导致主从服务器的数据库状态出现不一致时， 让主从服务器的数据库重新回到一致状态。 同步 当客户端向从服务器发送 SLAVEOF 命令，... Redis 的复制功能分为同步（sync）和命令传播（command propagate）两个操作： 同步操作用于将从服务器的数据库状态更新至主服务器当前所处的数据库状态。命令传播操作用于在主服务器的数据库状态被修改， 导致主从服务器的数据库状态出现不一致时， 让主从服务器的数据库重新回到一致状态。 同步 当客户端向从服务器发送 SLAVEOF 命令，...
- 1 字符串 redis并未使用传统的c语言字符串表示，它自己构建了一种简单的动态字符串抽象类型。 在redis里，c语言字符串只会作为字符串字面量出现，用在无需修改的地方。 当需要一个可以被修改的字符串时，redis就会使用自己实现的SDS（simple dynamic string）。比如在redis数据库里，包含字符串的键值对底层都是SDS实现的，不止如此，SDS还... 1 字符串 redis并未使用传统的c语言字符串表示，它自己构建了一种简单的动态字符串抽象类型。 在redis里，c语言字符串只会作为字符串字面量出现，用在无需修改的地方。 当需要一个可以被修改的字符串时，redis就会使用自己实现的SDS（simple dynamic string）。比如在redis数据库里，包含字符串的键值对底层都是SDS实现的，不止如此，SDS还...
- 最近遇到一个比较紧急的任务，要求统计在线用户，目的是配合性能测评，要求证明自己系统的在线用户能够达标，不过系统因为历史原因，并没有这个功能，所以只能去springSession官网和网上搜资料，想到通过统计redis里缓存的数据 因为系统原先的逻辑是使用Spring Session加上Redis做的会话共享实现的单点登录，登录之后会在session设置一个key值表示... 最近遇到一个比较紧急的任务，要求统计在线用户，目的是配合性能测评，要求证明自己系统的在线用户能够达标，不过系统因为历史原因，并没有这个功能，所以只能去springSession官网和网上搜资料，想到通过统计redis里缓存的数据 因为系统原先的逻辑是使用Spring Session加上Redis做的会话共享实现的单点登录，登录之后会在session设置一个key值表示...
- 幂等性+ack-1+事务 Kafka数据重复，可以再下一级：SparkStreaming、redis或者hive中dwd层去重，去重的手段：分组、按照id开窗只取第一个值； Kafka数据重复怎么处理? 在下一级消费者中去重。（redis、SparkStreaming） 二、重复消费问题： 即上述 消费方第1种情况—consumer在从broker读取消息后等消费完再comm... 幂等性+ack-1+事务 Kafka数据重复，可以再下一级：SparkStreaming、redis或者hive中dwd层去重，去重的手段：分组、按照id开窗只取第一个值； Kafka数据重复怎么处理? 在下一级消费者中去重。（redis、SparkStreaming） 二、重复消费问题： 即上述 消费方第1种情况—consumer在从broker读取消息后等消费完再comm...
- 因为redis有去重功能，可以保证数据仅仅消费一次。 方案一）通过zookeeper提供的API，自己编写代码，将offset提交到zookeeper；服务启动时，从zookeeper读取offset，并作为"KafkaUtils.createDirectStream"的输入参数 优点：可与基于zookeeper的监控系统融合，对消费情况进行监控 缺点：频繁的读写offset可... 因为redis有去重功能，可以保证数据仅仅消费一次。 方案一）通过zookeeper提供的API，自己编写代码，将offset提交到zookeeper；服务启动时，从zookeeper读取offset，并作为"KafkaUtils.createDirectStream"的输入参数 优点：可与基于zookeeper的监控系统融合，对消费情况进行监控 缺点：频繁的读写offset可...
- 前言 阅读本文之后读者将会学习到如何使用java调用redis。 开发环境包括idea、maven、jdk1.8、redis。 本文假设读者已经在本机搭建好了redis服务器，并开放端口为6379，如果还未完成该操作请参考相关文档搭建redis服务器。 redis可以使用docker快速使用，命令: docker run --name some-redis -p 6379:... 前言 阅读本文之后读者将会学习到如何使用java调用redis。 开发环境包括idea、maven、jdk1.8、redis。 本文假设读者已经在本机搭建好了redis服务器，并开放端口为6379，如果还未完成该操作请参考相关文档搭建redis服务器。 redis可以使用docker快速使用，命令: docker run --name some-redis -p 6379:...
- redis的持久化有哪两种，分别的优点和缺点,默认是哪种机制? 在redis中已经提供了两种持久化的方案: RDB:redis提供的一种基于快照机制实现的持久化方案,而快照就类似于照相机，会将一个服务器某个时刻的一个状态整体保存下来，快照文件一般都非常的小，只有几kb左右。 优点:由于持久化的文件非常小，适合做灾难恢复。 缺点:由于redis中持久化的时机问题，会存在数据丢失... redis的持久化有哪两种，分别的优点和缺点,默认是哪种机制? 在redis中已经提供了两种持久化的方案: RDB:redis提供的一种基于快照机制实现的持久化方案,而快照就类似于照相机，会将一个服务器某个时刻的一个状态整体保存下来，快照文件一般都非常的小，只有几kb左右。 优点:由于持久化的文件非常小，适合做灾难恢复。 缺点:由于redis中持久化的时机问题，会存在数据丢失...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签