学习目标 目标1：能够说出redis中的数据删除策与略淘汰策略 目标2：能够说出主从复制的概念，工作流程以及场景问题及解决方案 目标3：能够说出哨兵的作用以及工作原理，以及如何启用哨兵 目标4：能够说出集群的架构设计，完成集群的搭建 目标5：能够说出缓存预热，雪崩，击穿，穿透的概念，能说出redis的相关监控指标 1.数据删除与淘汰策略 1.1 过期数据 1.1.1 Redis中的数据特征 Redis是一种内存级数据库，所有数据均存放在内存中...
在访问商品搜索接口时，我们发现接口的响应特别慢。通过对系统 CPU、内存和磁盘 I/O 等资源使用情况的分析，我们发现这时出现了磁盘的 I/O 瓶颈，并且正是案例应用导致的。接着，我们借助 pidstat，发现罪魁祸首是 mysqld 进程。我们又通过 strace、lsof，找出了 mysqld 正在读的文件。根据文件的名字和路径，我们找出了 mysqld 正在操作的数据库和数据表。综合这些信息，我们猜测这是一个没利用索引导致的慢查询问题。为了验证猜测...
先看一下Redis是一个什么东西 官方简介解释到：Redis是一个基于BSD开源的项目，是一个把结构化的数据放在内存中的一个存储系统，你可以把它作为数据库，缓存和消息中间件来使用。 同时支持strings，lists，hashes，sets，sorted sets，bitmaps，hyperloglogs和geospatial indexes等数据类型。 它还内建了复制，lua脚本，LRU，事务等功能，通过redis sentinel实现高可用，通过redis cluster实现了自动分片。以及事务，发布/订阅，自...
Redis热点Key发现及常见解决方案 转载自：Redis热点Key发现及常见解决方案 一、热点Key问题产生的原因 1、用户消费的数据远大于生产的数据（热卖商品、热点新闻、热点评论、明星直播）。 在日常工作生活中一些突发的的事件，例如：双十一期间某些热门商品的降价促销，当这其中的某一件商品被数万次点击浏览或者购买时，会形成一个较大的需求量，这种情况下就会造成热点问题。 同理，被大量刊发、浏览的热点新闻、热点评论、明星直播...
作为创建集群的新手很可能会出现创建集群错误的可能性，比如使用了127.0.0.1也就是localhost来创建集群，回送地址会导致外网无法访问，但集群的作用大部分的情况就是要提供外网来访问。此文提供解决方法。什么样的情况就是创建集群错误了呢？ redis.clients.jedis.exceptions.JedisClusterMaxAttemptsException: No more cluster attempts left.at redis.clients.jedis.JedisClusterCommand.runWithRetries(JedisClusterCommand.ja...
（2.1）什么情况下缓存和数据库会不一致 在高并发的情况下，如果所有的数据都从数据库中去读取，那再强大的数据库系统都承受不了这个压力，因此我们会将部分数据放入缓存中，比如放入redis中。这是典型的用空间换时间的方式。 但是这个redis相当于是真实数据的一个副本，这就意味着如果数据库中数据发生变化的时候，就会导致缓存数据不一致的问题。 归根结底，只要有两份数据存在，数据一致性问题就是不可避免的。 （2.2）解决方法...
错误描述信息如下：StackExchange.Redis.RedisConnectionException: Endpoint 127.0.0.1:6381 serving hashslot 7982 is not reachable at this point of time. Please check connectTimeout value. If it is low, try increasing it to give the ConnectionMultiplexer a chance to recover from the network disconnect. IOCP: (Busy=0,Free=1000,Min=4,Max=1000), WORKER: (Busy=1,Free=32766,Min=4,Max=32767), Local-CPU: n/a...
1，场景再现 场景：总公司可以给分公司下发今年的规划任务（可能只是写了个规划大纲），分公司收到后，进行详细的规划补充，然后提交。 比如规划表：CREATE TABLE `sys_plan` (`id` int(11) NOT NULL AUTO_INCREMENT COMMENT 'id',`branch_offince_id` int(11) DEFAULT NULL COMMENT '分公司id',`head_office_plan` varchar(255) DEFAULT NULL COMMENT '总公司规划',`branch_office_plan` varchar(255) DEFAULT NULL COMMENT '分公...
用LAMP或者LNMP搭建Worepress的时候，安装主题或者插件时候，往往提示需要输入FTP服务端信息的问题，其实这是一个坑，可以完全避免的 我们只需在wp-config.php文件最后添加以下代码，即可轻松解决！：define("FS_METHOD", "direct"); define("FS_CHMOD_DIR", 0777); define("FS_CHMOD_FILE", 0777); 如果提醒无法安装,理由是文件无法创建目录,这个好解决.给wordpress添加权限就好chmod -R 777 /vsr/www/html/wordpress wordpre...
一、 Redis分布式锁实现原理SETNX key value //如果key不存在,则创建并赋值 EXPIRE key seconds //设置key的生存时间,当key过期(生存时间为0),会自动删除存在风险：SETNX和EXPIRE 为两个指令，如果设置了SETNX后程序崩溃，EXPIRE未成功执行则会出现资源锁死的情况。二、针对该问题，redis 在2.6.12版本过后增加新的解决方案set key value [expiration EX seconds|PX milliseconds] [NX|XX]EX seconds:将键的过期时间设置为 seconds...
1.需求背景是什么？2.存储何种数据？3.数据特点是什么？4.存在哪些技术挑战？5.解决方案有哪些？6.md5散列桶的方法需要注意的问题？7.测试结果是什么？解决方案：1 需求背景该应用场景为DMP缓存存储需求，DMP需要管理非常多的第三方id数据，其中包括各媒体cookie与自身cookie（以下统称supperid）的mapping关系，还包括了supperid的人口标签、移动端id（主要是idfa和imei）的人口标签，以及一些黑名单id、ip等数据。在hdfs的帮助下...
安装不上vc_redist的解决办法部分来源：https://blog.csdn.net/qwq1503/article/details/65916426不管是2008R2 还是 2012R2，如果安装vc_redist及“MSVBCRTAIO_v2020.04.10.exe”（微软常用运行库合集），都没有效果（表现为：C:\Windows\System32或C:\Windows\SysWOW64 目录下没有以api-ms-win-crt开头的dll），则请按如下顺序下载并安装补丁： 第一步: Windows8.1-KB2919442-x64.msu下载链接:https://www.microsoft.com/zh-cn/do...
问题一 ：somaxconn redis启动警告问题：WARNING: The TCP backlog setting of 511 cannot be enforced because /proc/sys/net/core/somaxconn is set to the lower value of 128.这句话的翻译大概就是：对一个高负载的环境来说tcp设置128这个值，太小了。 这是我的理解，绝对的还需到官网理解。然后我们可以手动设置，或者设置永久值 临时解决方案 echo 512 > /proc/sys/net/core/somaxconn 长期解决方案 sudo vim /etc/sysct...
通过学习整理其他优秀资源，本文解决三个问题：redis如何持久化？ 生产环境中，redis的可用性如何保证？ redis中遇到存到存储上限如何解决？一、redis持久化 redis是基于内存的， 内存特点是断电易失。就必然涉及到持久化操作。redis持久化有两种方式：快照（rdb）和日志（aof）。 1.快照和日志 快照类似于序列化和反序列化过程。把数据序列化成二进制放到磁盘，加载时把磁盘当中的数据直接反序列化，读过来，不需要执行什么。 日志...
1、集群的概念1.1、集群的两大能力负载均衡：负载均衡把任务比较均匀的分布到集群环境下的计算和网络资源，以提高数据吞吐量。错误恢复（高可用）：如果集群中的某一台服务器由于故障或者维护需要无法使用，资源和应用程序将转移到可用的集群节点上。这种由于某个节点的资源不能工作，另一个可用节点中的资源能够透明的接管并继续完成任务的过程，叫做错误恢复。 负载均衡和错误恢复要求各服务实体中有执行同一任务的资源存在，而且...