10年大厂程序员是怎么学习使用redis的 1. redis存储原理分析 2. redis源码学习分享 3. redis跳表和B+树详细对比分析 视频讲解如下，点击观看：<iframe allowfullscreen="true" data-mediaembed="bilibili" id="oyTznZ9d-1617363967000" src="https://player.bilibili.com/player.html?aid=757418255"></iframe> 10年大厂程序员是如何高效学习使用redis的丨redis源码分析丨redis存储原理丨 分布式丨中间件丨B+树丨后端开发丨Linux服...
问题描述 生产环境上突然出现数据中断的情况，分析日志发现应用连接Redis出现“max number of clients reached”的异常。那么问题很明显了，某个应用将Redis的连接占满了。 分析方法 第一步,先分析Redis.conf文件，确认配置的连接数为多少，我们系统采用的默认值10000。 ################################### CLIENTS ##################################### Set the max number of connected clients at the same time. By defaul...
string 介绍 ：string 数据结构是简单的 key-value 类型。虽然 Redis 是用 C 语言写的，但是 Redis 并没有使用 C 的字符串表示，而是自己构建了一种 简单动态字符串（simple dynamic string，SDS）。相比于 C 的原生字符串，Redis 的 SDS 不光可以保存文本数据还可以保存二进制数据，并且获取字符串长度复杂度为 O(1)（C 字符串为 O(N)）,除此之外,Redis 的 SDS API 是安全的，不会造成缓冲区溢出。 常用命令: set,get,strlen,exis...
摘要 上一节我们学会了使用 HyperLogLog 数据结构来进行估数，它非常有价值，可以解决很多精确度不高的统计需求。但是如果我们想知道某一个值是不是已经在 HyperLogLog 结构里面了，它就无能为力了，它只提供了 pfadd 和 pfcount 方法，没有提供 pfcontains 这种方法。讲个使用场景，比如我们在使用新闻客户端看新闻时，它会给我们不停地推荐新的内容，它每次推荐时要去重，去掉那些已经看过的内容。问题来了，新闻客户端推荐系统如...
redis通过sentinel， 在master宕机时，会迅速选择从库中的一个作为新的主库，然后其他的从库跟这个新主库重新建立主从关系。亲是否跟作者一样好奇--------假如一个redis主库有多个从库，最终会选择哪个从库作为新主库？ 是否存在随机的情况？ 您会给出什么样的答案。上面图片的白色部分，是完整的主从切换日志。关于选择新主库，日志中只有如下所示的轻描淡写地一行。“+selected-slave slave 197.3.XXX.44:6379 197.3.XXX.44 63...
结构定义 源码： /* server.h 5.0.8 *With multiplexing we need to take per-client state.* Clients are taken in a linked list. */ typedef struct client {uint64_t id; /* Client incremental unique ID. */int fd; /* Client socket. */redisDb *db; /* Pointer to currently SELECTed DB. */robj *name; /* As set by CLIENT SETNAME. */sds querybuf; /* Bu...
1、故障转移 在（34）中提到了failover_state的状态会被设置为：SENTINEL_FAILOVER_STATE_UPDATE_CONFIG。这里需要注意的是这个状态的处理方法并不在之前提到的sentinelFailoverStateMachine中。这个方法的处理五个状态中并不包含上述状态。除了上述状态外还有一个状态：SENTINEL_FAILOVER_STATE_NONE。 整个故障转移流程的状态如下所示： /* Failover machine different states. */ #define SENTINEL_FAILOVER_STATE_NONE 0 /* N...
1. 介绍 众所周知，redis是一个开源、短小、高效的key-value存储系统，相对于memcached，redis能够支持更加丰富的数据结构，包括： 字符串（string）哈希表（map）列表（list）集合（set）有序集（zset） 主流的key-value存储系统，都是在系统内部维护一个hash表，因为对hash表的操作时间复杂度为O(1)。如果数据增加以后，导致冲突严重，时间复杂度增加，则可以对hash表进行rehash，以此来保证操作的常量时间复杂度。 那么，对于这...
本文导读：应用异常监控 Redis客户端异常分析 Redis客户端问题引导分析 站在Redis客户端视角分析 站在Redis服务端视角分析 资源池生产配置合理性分析 本文总结 今天我们来聊聊线上环境遇到的一个问题以及分析过程。 1.应用异常监控 这不，项目中有一个Redis客户端的异常在疫情期间，出现在了你的面前，虽然该异常是偶发，有必要仔细分析下该异常出现的原由。 具体异常信息如下所示：大家看截图展示的异常信息，是不是很想问...
摘要：本文通过对Redis Sentinel源码的理解，详细说明Sentinel的代码实现方式。Redis Sentinel 是Redis提供的高可用模型解决方案。Sentinel可以自动监测一个或多个Redis主备实例，并在主实例宕机的情况下自动实行主备倒换。本文通过对Redis Sentinel源码的理解，详细说明Sentinel的代码实现方式。 Sentinel使用Redis内核相同的事件驱动代码框架， 但Sentinel有自己独特的初始化步骤。在这篇文章里，会从Sentinel的初始化、Sentinel...
1.节点间的内部通信机制 1.1 基础通信原理 redis cluster节点间采取gossip协议进行通信，跟集中式不同，不是将集群元数据（节点信息，故障，等等）集中存储在某个节点上，而是互相之间不断通信，保持整个集群所有节点的数据是完整的。集中式：好处在于，元数据的更新和读取，时效性非常好，一旦元数据出现了变更，立即就更新到集中式的存储中，其他节点读取的时候立即就可以感知到；不好在于，所有的元数据的跟新压力全部集中在一个...
目录一、主流多核CPU1.1 多核CPU缓存结构1.2 对redis的影响二、NUMA CPU2.1 UMA（SMP）架构VS NUMA 架构2.2 对redis的影响本文主要基于cpu的架构和运行机制来分析cpu架构对redis的性能影响。一、主流多核CPU 1.1 多核CPU缓存结构访问速度L1>L2>L3>内存。权限L1和L2为每个核私有（每一个物理核下面的逻辑核共享L1和L2）L3缓存为多核共享访问顺序CPU访问时先从L1和L2缓存读取数据，没有会去L3缓存访问。 当前核频繁执行的指令和数据会...
一、数据持久化 redis做为一种内存型数据库，做持久化，个人感觉略有鸡肋的意思。似乎有一种，别人有，自己不有也不行的感觉。以目前Redis主流的应用方式，如果仔细分析，基本上都是在内存中即可完成，对持久化没要求或者说不大。再举一个反例，如果内存中有几百G甚至更多的数据，真要是整体当机，恢复的时间基本就是灾难。 目前基本应用仍然是以关系型数据库或者其它数据库（如Hadoop，Mysql等）为持久化的方式，Redis只是发挥其内...
Redis 单机模式，主从模式，哨兵模式(sentinel)，集群模式(cluster)，第三方模式优缺点分析 Redis 的几种常见使用方式包括： 单机模式主从模式哨兵模式(sentinel)集群模式(cluster)第三方模式 单机模式 Redis 单副本，采用单个 Redis 节点部署架构，没有备用节点实时同步数据，不提供数据持久化和备份策略，适用于数据可靠性要求不高的纯缓存业务场景。 优点： 架构简单，部署方便。高性价比：缓存使用时无需备用节点(单实例可用性...
Redis作为内存数据库，拥有非常高的性能，单个实例的QPS能够达到10W左右。但我们在使用Redis时，经常时不时会出现访问延迟很大的情况，如果你不知道Redis的内部实现原理，在排查问题时就会一头雾水。 很多时候，Redis出现访问延迟变大，都与我们的使用不当或运维不合理导致的。 这篇文章我们就来分析一下Redis在使用过程中，经常会遇到的延迟问题以及如何定位和分析。 使用复杂度高的命令 如果在使用Redis时，发现访问延迟突然增大...