【学习目标】Scrapy-redis分布式的运行流程Scheduler与Scrapy自带的Scheduler有什么区别Duplication Filter作用源码自带三种spider的使用6. Scrapy-redis分布式组件Scrapy 和 scrapy-redis的区别Scrapy 是一个通用的爬虫框架，但是不支持分布式，Scrapy-redis是为了更方便地实现Scrapy分布式爬取，而提供了一些以redis为基础的组件(仅有组件)。pip install scrapy-redisScrapy-redis提供了下面四种组件（components）：(四种组件意...
Redis实战这本书，看完以后最大的不是redis本身的东西，而是作者面对实际问题的分析而给出的设计方案，可以看成NoSql设计的应用。个人从这方面收获很多，至于Redis本身的东西，这个就花一两个小时就可以知道大致是怎么一回事了。具体API就直接查查就OK。关键是怎么用，这才是灵感创造所在，看看别人解决问题的思路，学习学习哈。 原文：http://www.cnblogs.com/cn-coder/p/5465400.html
笔记2、源码编译安装Redis4.x
简介：使用源码安装Redis4.x和配置外网访问
1、快速安装 https://redis.io/download#installation
wget http://download.redis.io/releases/redis-4.0.9.tar.gz
tar xzf redis-4.0.9.tar.gz
cd redis-4.0.9
make
启动服务端：src/redis-server
启动客户端：src/redis-cli
2、默认是本地访问的，需要开放外网访...
需要jar包1<dependency>2<groupId>redis.clients</groupId>3<artifactId>jedis</artifactId>4<version>2.8.0</version>5</dependency>spring-redis.xml配置文件： 1<?xml version="1.0" encoding="UTF-8"?> 2<beans xmlns="http://www.springframework.org/schema/beans" 3 xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" 4 xmlns:p="http://www.springframework.org/schema/p" 5 xmlns:aop="http://www.springf...
一、Redis简介
Redis 是一个开源的内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。
它支持多种类型的数据结构，如字符串（Strings），散列（Hashes），列表（Lists），集合（Sets），有序集合（Sorted Sets或者是ZSet） 与范围查询， Bitmaps，Hyperloglogs 和 地理空间（Geospatial）索引半径查询。 其中常见的数据结构类型有String、List、Set、Hash、ZSet这5种。
Redis 内置了复制（Replication），LUA脚本（L...
本章说的是：mybatis结合redis实战二级缓存
一：自定义mybatis缓存
我们知道任何mybatis二级缓存都需要实现一个接口，这个接口就是org.apache.ibatis.cache.Cache,代码如下：
package com.demo.spring.mybatis.cache;import java.util.concurrent.locks.ReadWriteLock;import java.util.concurrent.locks.ReentrantReadWriteLock;import org.apache.ibatis.cache.Cache;import org.slf4j.Logger;import org.slf4j.LoggerFactory;i...
074：Redis六大淘汰策略&事务原理&过期key事件监听
1 回顾上节课Redis核心内容2 Redis核心六大淘汰策略3 RedisKey过期回调监听4 Redis环境配置对key过期监听5 基于Redis过期回调实现订单30分钟有效期6 Redis中的事务策略Multi7 Redis的Watch与Multi区别1 回顾上节课Redis核心内容
课程内容:
Redis六大内存淘汰策略基于RedisKey自动过期事件通知基于RedisKey过期事件实现订单超时Redis实现对key的事务操作
在Redis中存放对象使用 js...
发布与订阅 P52
Redis 实现了发布与订阅（publish/subscribe）模式，又称 pub/sub 模式（与设计模式中的观察者模式类似）。订阅者负责订阅频道，发送者负责向频道发送二进制字符串消息。每当有消息被发送至给定频道时，频道的所有订阅者都会接收到消息。
发布与订阅命令 P52
命令格式描述SUBSCRIBESUBSCRIBE channel [channel …]订阅一个或多个频道UNSUBSCRIBEUNSUBSCRIBE [channel [channel …]]退订一个或多个频道；没有指定频道...
发布与订阅 P52
Redis 实现了发布与订阅（publish/subscribe）模式，又称 pub/sub 模式（与设计模式中的观察者模式类似）。订阅者负责订阅频道，发送者负责向频道发送二进制字符串消息。每当有消息被发送至给定频道时，频道的所有订阅者都会接收到消息。
发布与订阅命令 P52命令
格式
描述SUBSCRIBE
SUBSCRIBE channel [channel ...]
订阅一个或多个频道UNSUBSCRIBE
UNSUBSCRIBE [channel [channel ...]]
退订一个或多个频道；没有...
我们知道Redis是目前非常主流的KV数据库，它因高性能的读写能力而著称，其实还有另外一个优势，就是Redis提供了更加丰富的数据类型，这使得Redis有着更加广泛的使用场景。那Redis提供给用户的有哪些数据类型呢？主要有：string（字符串）、List（列表）、Set（集合）、Hash（哈希）、Zset（有序集合）、HyperLogLogs（计算基数用的一种数据结构）、Streams（Redis 5.0提供一种建模日志用的全新数据结构）。
需要注意的是这里说的数...
发布订阅(pub/sub)是一种消息通信模式，主要的目的是解耦消息发布者和消息订阅者之间的耦合，这点和设计模式中的观察者模式比较相似。pub/sub不仅仅解决发布者和发布订阅(pub/sub)是一种消息通信模式，主要的目的是解耦消息发布者和消息订阅者之间的耦合，这点和设计模式中的观察者模式比较相似。pub/sub 不仅仅解决发布者和订阅者直接代码级别耦合也解决两者在物理部署上的耦合。redis 作为一个pub/sub 的server，在订阅者和发布者...
一、键值相关命令keys:返回满足给定pattern的所有key用表达式*,代表取出所有的key用表达式mylist*,代表取出所有以mylist开头的keyexists:确认一个key&nbs..一、键值相关命令keys:返回满足给定 pattern 的所有 key用表达式*,代表取出所有的 key用表达式 mylist*,代表取出所有以 mylist 开头的 keyexists:确认一个 key 是否存在del:删除一个 keyexpire:设置一个 key 的过期时间(单位:秒)在本例中,我们设置 age 这个 key 的过期时间是...
Redis的作者antirez(SalvatoreSanfilippo)曾经发表了一篇名为Redis宣言(RedisManifesto)的文章,文中列举了Redis的七个原则,以向大家阐明Redis的思..Redis 的作者 antirez(Salvatore Sanfilippo)曾经发表了一篇名为 Redis 宣言(Redis Manifesto)的文章,文中列举了 Redis 的七个原则,以向大家阐明 Redis 的思想。1、Redis 是一个操作数据结构的语言工具,它提供基于 TCP 的协议以操作丰富的数据结构。在 Redis 中,数据结构这个词的意义...
最近沉迷于业务开发无法自拔 ，有一段时间没有更新博文了，后续博文内容计划把一些业务场景下的实战方案，或者比较好的设计思路进行分享，就不像之前围绕着一个主题，消耗很多的时间去整理相关内容(憋大招)，后续可能一篇的内容量就没那么丰富，但是尽可能针对一个点进行更细化，或者更深入的分析，通过不断分享和自我复盘，进行经验的沉淀，同时提高博文分享的频率 场景场景1留言功能限制，30秒 内只能评论 10次，超出次数不让能再...
【GitHub】：示例代码 【GitHub】：redis-plus-plus1、Redis简介
1、Redis与其他数据库和软件对比
名称类型数据存储选项查询类型附加功能Redis内存存储的非关系数据库字符串、列表、集合、散列表、有序集合各数据类型均有专属命令，另外还有批量操作和不完全的事务支持发布与订阅，主从复制，持久化，脚本 [存储过程]memcached内存存储的键值缓存键值之间的映射创建、读取、更新、删除以及其他几个命令为提升性能而设的多线程服务器...
