一、应用场景：订单超过 30 分钟未支付，则自动取消。外卖商家超时未接单，则自动取消。医生抢单电话点诊，超过 30 分钟未打电话，则自动退款。等等场景都可以用定时任务去轮询实现，但是当数据量过大的时候，高频轮询数据库会消耗大量的资源，此时用延迟队列来应对这类场景比较好。二、需求消息存储过期延时消息实时获取高可用性三、为什么使用 Redis 实现？3.1、Rabbitmq 延时队列优点：消息持久化，分布式缺点：延时相同的消息必...
再使用redis的过程中，发现使用缓存虽然好，但是有些地方还是比较难权衡，缓存对象大了，存储对象时的序列化工作很繁重，消耗大量cpu；那么切分成很小的部分吧，存取的次数变多了，redis客户端的交互次数上不去，这是一个矛盾。要是有一个客户端能支持更多的交互次数，那么在完成既定指标的前提下，岂不是可以让我们的建模工作变的更宽松一些？于是参照redis协议，花了5天时间，做了一个具备基本功能的redis客户端。它的特性：1.支...
业务需求现需对某国外图片网站进行大量爬取，为提高效率使用多进程，对多个子目录下的图片同时爬取。由于网站对单IP的下载量有限额，需要在额度耗尽时自动从代理池里更换新代理。IP的可用额度无法在本地计算或实时获取，只有在耗尽时才能从目标网站得到异常通知。业务分析虽然是单机并发，但所面对的问题其实属于分布式领域。由于网站并未对访问频率作出限制，所以只需考虑IP的下载总量即可，可让所有进程都走同一个代理IP；又因为...
摘要: 第一：Redis 是什么？ Redis是基于内存、可持久化的日志型、Key-Value数据库 高性能存储系统，并提供多种语言的API. 第二：出现背景 数据结构(Data Structure)需求越来越多, 但memcache中没有, 影响开发效率 性能需求, 随着读操作的量的上升需要解决，经历的过程有: 数据库读写分离(M/S)–>数据库使用多个Slave–>增加Cache (memcache)–>转到Redis 解决写的问题： 水平拆分，对表的拆分，将有的用户放在这个表，有的用户放...
1. 前言2. 整合Redis快速入门3. StringRedisTemplate基本操作及测试4. 实现Redis事务5. Redis乐观锁(分布式锁）1. 前言这篇文章你能学到，SpringBoot整合Redis的最简单方式，不需要任何复杂的配置。还有完整的乐观锁，分布式锁，事务等实现样例代码供你选择。2. 整合Redis快速入门SpringBoot项目引入redis依赖<!-- 引入 redis 依赖 --> <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-d...
实际上就是为 keyspace 增加了一个 key 是包含字符串“mobile”的字符串对象，value 为包含字符“13800000000”的字符串对象。看图：对于删改查，没啥好说的。类似java 的 map 操作，大多数程序员应该都能理解。需要特别注意的是，再执行对键的读写操作的时候，Redis 还要做一些额外的维护动作：维护 hit 和 miss 两个计数器。用于统计 Redis 的缓存命中率。更新键的 LRU 时间，记录键的最后活跃时间。如果在读取的时候发现键已经过...
1.数据库 Redis的所有数据库都保存在redisServer.db数组中，数据库主要是由两个字典组成：dict字典，负责保存键值对；expires，负责保存键的过期时间 Redis使用惰性删除和定期删除两种方式处理过期键：惰性删除是指在碰到了过期键才将其删除，定期删除是指每隔一段时间主动查找并删除过期键（Redis采用随机查找） 针对过期键的处理：RDB（快照）中不包含过期键，AOF文件也不会包含过期键；主服务器发现过期键后会删除过期...
目录(?)[-]Redis对象类型简介Redis对象底层数据结构字符串对象列表对象哈希对象集合对象有序集合对象结尾 Redis对象类型简介Redis是一种key/value型数据库，其中，每个key和value都是使用对象表示的。比如，我们执行以下代码：redis>SET message "hello redis" 其中的key是message，是一个包含了字符串"message"的对象。而value是一个包含了"hello redis"的对象。 Redis共有五种对象的类型，分别是：类型常量对象的名称REDIS_STR...
作者：中华石杉面试题redis 的持久化有哪几种方式？不同的持久化机制都有什么优缺点？持久化机制具体底层是如何实现的？面试官心理分析redis 如果仅仅只是将数据缓存在内存里面，如果 redis 宕机了再重启，内存里的数据就全部都弄丢了啊。你必须得用 redis 的持久化机制，将数据写入内存的同时，异步的慢慢的将数据写入磁盘文件里，进行持久化。如果 redis 宕机重启，自动从磁盘上加载之前持久化的一些数据就可以了，也许会丢失少许...
1.引入依赖<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId><version>2.0.5.RELEASE</version></dependency><dependency><groupId>org.redisson</groupId><artifactId>redisson</artifactId><version>3.10.7</version></dependency>2.配置文件：application.propertiesspring.redis.host=127.0.0.1 spring.redis.port=6379 spring.redis.password=1234563.配置类：Redis...
需要jar包:jedis-2.1.0.jarcommons-pool-1.6.jar单元测试:package com.wangbingan.db;import java.util.HashMap; import java.util.Iterator; import java.util.Map;import org.junit.Before; import org.junit.Test;import com.wangbinga.util.RedisUtil;import redis.clients.jedis.Jedis;/** * Redis测试 * * @author AK * */ public class RedisTest {private Jedis jedis;// private String name = "Usher";// private...
logstash + elasticsearch + Kibana+Redis+Syslog-ngElasticSearch是一个基于Lucene构建的开源，分布式，RESTful搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。支持通过HTTP使用JSON进行数据索引。logstash是一个应用程序日志、事件的传输、处理、管理和搜索的平台。你可以用它来统一对应用程序日志进行收集管理，提供 Web 接口用于查询和统计。其实logstash是可以被别的替换，比如常见的fluent...
Redis主从配置及通过Keepalived实现Redis自动切换高可用[日期：2014-07-23]来源：Linux社区 作者：fuquanjun[字体：大中小] 一：环境介绍：Master: 192.168.1.4Slave: 192.168.1.5Virtural IP Address (VIP): 192.168.1.253二：设计思路：当 Master 与 Slave 均运作正常时, Master负责服务，Slave负责Standby；当 Master 挂掉，Slave 正时, Slave接管服务，同时关闭主从复制功能；当 Master 恢复正常，则从Slave同步数据，同步数据...
回到目录对于多WEB的环境现在已经是必须的了，很难想像一台WEB服务器面对百万并发的响应，所以，我们需要多台WEB服务器集群合作，来缓解这种高并发，高吞吐的场景，而对于多WEB的场景又会有个问题出现，即session存储的问题，如一个用户登陆后，把一个状态信息存储到当前WEB服务器的session里，而你请求其它页面时，很可能就被路由到另一台服务器了，这时，session也就丢了，而对于这种情况，有人把redis这个存储中间件想了起来，对...
前言 分布式锁是控制分布式系统之间同步访问共享资源的一种方式。在分布式系统中，常常需要协调他们的动作。如果不同的系统或是同一个系统的不同主机之间共享了一个或一组资源，那么访问这些资源的时候，往往需要互斥来防止彼此干扰来保证一致性，这个时候，便需要使用到分布式锁。什么是分布式锁1.在分布式环境中使用到的锁就是分布式锁2.在分布式环境中对不同应用程序操作的共享资源进行加锁就是分布式锁分布式环境1.同一个应用下...