一、前言 ??最近由于疫情影响，时间比较多，所以开始学习之前一直想学，但是却没时间学的Redis。这两天研究了一下Redis的持久化以及主从复制机制，现在已经很晚了，就不多废话了。这篇博客就来谈一谈Redis的主从复制机制。在这里需要提醒一下，主从复制依赖于Redis的快照持久化（RDB），所以如果不了解持久化，请先去研究那一块的内容，可以看看这篇博客：详细分析Redis的持久化操作—RDB与AOF。二、正文 2.1 什么是主从复制 ??首先...
一、quicklist简介 Redis列表是简单的字符串列表，按照插入顺序排序。你可以添加一个元素到列表的头部（左边）或者尾部（右边）。 一个列表最多可以包含 232 - 1 个元素 (4294967295, 每个列表超过40亿个元素)。 其底层实现所依赖的内部数据结构就是quicklist，主要特点有： 1. list是一个双向链表。 2. 在list的两端追加和删除数据极为方便，时间复杂度为O(1)。 3. list也支持在任意中间位置的存取操作，时间复杂度为O(N)。 在看...
在一些网络服务的系统中，Redis 的性能，可能是比 MySQL 等硬盘数据库的性能更重要的课题。比如微博，把热点微博[1]，最新的用户关系，都存储在 Redis 中，大量的查询击中 Redis，而不走 MySQL。 那么，针对 Redis 服务，我们能做哪些性能优化呢？或者说，应该避免哪些性能浪费呢？ Redis 性能的基本面 在讨论优化之前，我们需要知道，Redis 服务本身就有一些特性，比如单线程运行。除非修改 Redis 的源代码，不然这些特性，就是我...
一、Redis基本概念介绍和特性1.1 Redis基本概念介绍1.Redis是远程的，有客户端和服务端，我们一般说的是服务端； 2.Redis是基于内存的，所以比基于硬盘的MySQL要快很多，但非常吃内存 3.Redis是非关系型数据库。本质上也是数据库，但MySQL关系型数据库存储时必须定义数据词典，而Redis则不需要。1.2 Redis 和 Memcached比较Redis数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。 ...
目录 节点间的内部通信机制 基础通信原理 gossip 协议 ping 消息深入面向集群的 jedis 内部实现原理 基于重定向的客户端 smart jedis高可用性与主备切换原理 与哨兵比较参考 节点间的内部通信机制 基础通信原理 redis cluster 节点间采取 gossip 协议进行通信 gossip：互相之间不断通信，保持整个集群所有节点的数据是完整的而集中式是将集群元数据（节点信息，故障，等等）集中存储在某个节点上； 经典的集中式中间件 zookeeper他...
如果测试项目用的maven依赖，先把maven坐标准备好 <!-- https://mvnrepository.com/artifact/redis.clients/jedis --><dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>2.9.0</version></dependency> import redis.clients.jedis.Jedis; import redis.clients.jedis.Tuple;import java.util.Map; import java.util.Set;/*** Jedis工具类*/ public class JedisUtil {private Strin...
前言 本人的工程实践为金融文本的数据挖掘，这其中金融文本类的数据的获取就很关键，而这些数据是通过爬虫来获取的。 我们使用了scrapy-redis这个开源的分布式爬虫架构。而scrapy-redis这种框架的搭建恰好是使用了模板方法模式来完成的，真的是无巧不成书。 模板方法模式 《设计模式之禅》中关于模板方法的定义为：定义一个操作中的算法框架，而将一些步骤延迟到子类中。使子类可以不改变一个算法的结构即可重定义该算法的某些步骤...
redis-rdb-tools是由Python写的用来分析Redis的rdb快照文件用的工具，它可以把rdb快照文件生成json文件或者生成报表用来分析Redis的使用详情、使用标准的diff工具比较两个dump文件，总之是比较实用的工具，至于安装可以通过Python的pip来安装[root@localhost ~]# yum -y install python-pip python-redis [root@localhost ~]# pip install rdbtools 当然也可以通过git下载源码来安装，但是必须要安装python-redis的插件，如下： gi...
原文链接：https://my.oschina.net/zipu888/blog/549570接Redis Sentinel源码分析（一）sentinelTimer函数周期性运行，第一次在服务启动后1ms执行，后续执行周期1000/server.hz（sentinelTimer函数会修改server.hz的值） sentinelTimer内部包含sentinel模式需要定期执行的操作，包括check master、slave、sentinel的状态，并根据配置的条件判断是否需要fail over。 void sentinelTimer(void) {//check是否需要进入TITL模式sentine...
SDS Simple Dynamic String SDS结构定义 struct sds{// SDS所保存字符串长度，即buf数组中已使用字节数量int len；// buf数组中未使用字节的数量int free；// 保存字符串的字节数组char[] buf; }相比C语言优势：得到数组长度时间复杂度由O(n)变为O(1)，直接由len得到 自动扩容，确保buf数组不会溢出 减少修改字符串到来的内存重分配的次数内存重分配策略内存预分配（扩容）对SDS进行修改后，SDS小于1M，分配len同样大小给free；大于...
一.Key》Redis key值是二进制安全的，这意味着可以可以使用任何二进制序列作为key值。空字符串也是有效的key值。》key取值原则1.键值不需要太长，消耗内存，且在数据中查找这类键值计算成本较高2.键值不宜过短，可读性较差，不宜数据分类和扩展》过期1.Redis中可以给key设置一个有效时间【秒或毫秒】，当达到这个时长后，这些键值将会被自动删除》有效1.查看剩余有效时间【TTL key/PTTL key】【TTL time to live】>key存在但没有设...
原文链接：https://www.cnblogs.com/rgcLOVEyaya/p/RGC_LOVE_YAYA_1003days.htmlRedlock：全名叫做 Redis Distributed Lock;即使用redis实现的分布式锁； 使用场景：多个服务间保证同一时刻同一时间段内同一用户只能有一个请求（防止关键业务出现并发攻击）； 官网文档地址如下：https://redis.io/topics/distlock 这个锁的算法实现了多redis实例的情况，相对于单redis节点来说，优点在于 防止了 单节点故障造成整个服务停止运行...
过期策略：我们在set key时，可以给一个expire time，就是过期时间这段过期时间以后，redis对key删除使用：定期删除+惰性删除定期删除指redis默认在100ms内随机抽取一些设置了过期时间的key，检查是否过期，过期就删除。定期删除因为随机的，很多key没有删除，就用到惰性删除惰性删除是在查询某个key时，redis检查下这个key是否过期，过期就删除。但是如果定期删除漏掉很多过期key，也没进行查询，不能惰性删除，造成很多过期key堆...
一、常用数据结构列表 1.String: 简单的key-value类型，value可以为String,也可以为数字。使用场景有缓存系统下拉框值，保存分布式session，接口限流（利用过期机制expire，key自增机制incr），用户积分等。 2.List: 简单的字符串列表，数据结构类型为队列（FIFO），可以在队头或者对尾插入删除数据。常用使用场景有消息队列（lpop，rpush）,排行榜，实时排行榜（Zsort也能实现）。 3.Hash：String类...
摘要Redis是一款著名的key-value内存数据库软件，同时也是一款卓越的数据结构服务软件。它支持字符串、列表、哈希表、集合、有序集合五种数据结构类型，同时每种数据结构类型针对不同的应用场景又支持不同的编码方式。这篇文章主要介绍压缩列表编码，在理解压缩列表编码原理的基础上介绍Redis对压缩列表的应用，最后再对Redis压缩列表应用进行分析。 Redis压缩列表原理与应用 压缩列表是一种数据结构，这种数据结构的功能是将一系列...