首页 / REDIS / Redis Cluster

Redis Cluster

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Redis Cluster，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含5439字，纯文字阅读大概需要8分钟。

内容图文

原文链接：https://www.cnblogs.com/kerwinC/p/6611634.html

redis使用中遇到的瓶颈

　　我们日常在对于redis的使用中，经常会遇到一些问题

　　1、高可用问题，如何保证redis的持续高可用性。

　　2、容量问题，单实例redis内存无法无限扩充，达到32G后就进入了64位世界，性能下降。

　　3、并发性能问题，redis号称单实例10万并发，但也是有尽头的。

redis-cluster的优势　　

　　1、官方推荐，毋庸置疑。

　　2、去中心化，集群最大可增加1000个节点，性能随节点增加而线性扩展。

　　3、管理方便，后续可自行增加或摘除节点，移动分槽等等。

　　4、简单，易上手。

redis-cluster名词介绍

　　1、master　　主节点、

　　2、slave　　　从节点

　　3、slot　　　　槽，一共有16384数据分槽，分布在集群的所有主节点中。

redis-cluster简介

Redis Cluster - 文章图片

图中描述的是六个redis实例构成的集群

6379端口为客户端通讯端口

16379端口为集群总线端口

集群内部划分为16384个数据分槽，分布在三个主redis中。

从redis中没有分槽，不会参与集群投票，也不会帮忙加快读取数据，仅仅作为主机的备份。

三个主节点中平均分布着16384数据分槽的三分之一，每个节点中不会存有有重复数据，仅仅有自己的从机帮忙冗余。

集群部署

测试部署方式，一台测试机多实例启动部署。

安装redis

$ wget http://download.redis.io/releases/redis-3.2.8.tar.gz
$ tar xzf redis-3.2.8.tar.gz
$ cd redis-3.2.8
$ make

修改配置文件 redis.conf

#redis.conf默认配置
daemonize yes
pidfile /var/run/redis/redis.pid  #多实例情况下需修改，例如redis_6380.pid
port 6379　　　　　　　　#多实例情况下需要修改,例如6380
tcp-backlog 511
bind 0.0.0.0　　　　　　
timeout 0
tcp-keepalive 0
loglevel notice
logfile /var/log/redis/redis.log　　　　　　#多实例情况下需要修改，例如6380.log
databases 16
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb　　#多实例情况下需要修改，例如dump.6380.rdb
slave-serve-stale-data yes
slave-read-only yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-disable-tcp-nodelay no
slave-priority 100
appendonly yes
appendfilename "appendonly.aof"　　#多实例情况下需要修改,例如 appendonly_6380.aof
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-entries 512
list-max-ziplist-value 64
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10

#################自定义配置
#系统配置
#vim /etc/sysctl.conf
#vm.overcommit_memory = 1

aof-rewrite-incremental-fsync yes
maxmemory 4096mb
maxmemory-policy allkeys-lru
dir /opt/redis/data　　　　　　#多实例情况下需要修改，例如/data/6380

#集群配置
cluster-enabled yes
cluster-config-file /opt/redis/6380/nodes.conf   #多实例情况下需要修改，例如/6380/
cluster-node-timeout 5000


#从ping主间隔默认10秒
#复制超时时间
#repl-timeout 60

#远距离主从
#config set client-output-buffer-limit "slave 536870912 536870912 0"
#config set repl-backlog-size 209715200

启动六个实例：

/编译安装目录/src/redis-server redis.conf

注意，redis.conf应为6个不同的修改过的多实例配置文件。

注意，配置文件复制六分后，有许多需要你修改的地方。

创建redis-cluster

redis-trib.rb命令与redis-cli命令放置在同一个目录中，可全路径执行或者创建别名。

redis-trib.rb create --replicas 0 127.0.0.1:6310 127.0.0.1:6320 127.0.0.1:6330 127.0.0.1:6340 127.0.0.1:6350 127.0.0.1:6360

只要缺失了任意一部分的槽，redis-cluster便无法读取。

测试强行停机一台，既显示：

127.0.0.1:6310> get key

(error) CLUSTERDOWN The cluster is down

注：这里分片设置为了0

启动丢失的那一台后既恢复。数据不会丢失。

移动槽

redis-trib.rb reshard 127.0.0.1:6360

执行集群reshard操作，通过集群中127.0.0.1:6360这一台机器

[OK] All 16384 slots covered.

How many slots do you want to move (from 1 to 16384)? 2731

输入需要移动的槽数量

What is the receiving node ID? 21c93aa709e10f7a9064faa04539b3ecd

输入接收的节点的ID

How many slots do you want to move (from 1 to 16384)? 2731

What is the receiving node ID? 0abf4ca21c93aa709e10f7a9064faa04539b3ecd

Please enter all the source node IDs.

Type 'all' to use all the nodes as source nodes for the hash slots.

Type 'done' once you entered all the source nodes IDs.

Source node #1:0ddb4e430dda8778ac873dd169951c7d71b8235e

Source node #2:done

输入所有被移动的节点ID，确认后输入done

Moving slot 5460 from 0ddb4e430dda8778ac873dd169951c7d71b8235e

Moving slot 13653 from 0ddb4e430dda8778ac873dd169951c7d71b8235e

Do you want to proceed with the proposed reshard plan (yes/no)?

检查后输入yes进行移动分槽

至此，分槽移动完毕。

删除节点

redis-trib.rb del-node 127.0.0.1:6360 'f24c0c1ecf629b5413cbca632d389efcad7c8346'

最后跟着的是这个节点的ID，可在redis-cli终端中使用CLUSTER NODES查看

必要条件，此节点所有分槽均已移除。

添加master节点

redis-trib.rb add-node 127.0.0.1:6360 127.0.0.1:6350

新节点必须是空的，不能包含任何数据。请把之前aof和dump文件删掉，并且若有nodes.conf也需要删除。

add-node 将一个节点添加到集群里面，第一个是新节点ip:port, 第二个是任意一个已存在节点ip:port

node:新节点没有包含任何数据，因为它没有包含任何slot。新加入的加点是一个主节点，当集群需要将某个从节点升级为新的主节点时，这个新节点不会被选中，同时新的主节点因为没有包含任何slot，不参加选举和failover。

添加一个从节点

前三步操作同添加master一样

第四步:redis-cli连接上新节点shell,输入命令:cluster replicate 对应master的node-id

内容总结

以上是互联网集市为您收集整理的Redis Cluster全部内容，希望文章能够帮你解决Redis Cluster所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/892193.html

来源：【匿名】

【上一篇】redis中的事务【下一篇】redis可以做什么？

更多 ►

【Redis Cluster】教程文章相关的互联网学习教程文章

Docker快速构建Redis集群(cluster)【代码】

Docker快速构建Redis集群(cluster)以所有redis实例运行在同一台宿主机上为例子搭建步骤redis集群目录清单. ├── Dockerfile ├── make_master_slave.sh ├── run_master_slave.sh ├── compose_master_slave.sh ├── redis-trib.rb ├── master │?? ├── 7000 │?? │?? ├── data │?? │?? │?? ├── appendonly.aof │?? │?? │?? ├── dump.rdb │?? │?? │?? └── nodes.conf │?? │?? └── redi...

php操作redis cluster集群成功实例【代码】【图】

java操作redis cluster集群可使用jredisphp要操作redis cluster集群有两种方式：1、使用phpredis扩展，这是个c扩展，性能更高，但是phpredis2.x扩展不行，需升级phpredis到3.0，但这个方案参考资料很少2、使用predis，纯php开发，使用了命名空间，需要php5.3+，灵活性高我用的是predis，下载地址https://github.com/nrk/predis...下载好后重命名为predis，server1：192.168.1.198server2：192.168.1.199predis.php <?php require ‘...

Redis cluster理解

这个模式像是把Redis的并发按配置分配给多个Redis服务组（sentinel）,当服务组中的主服务器挂掉后用从服务器顶上，如果服务组中的服务器都挂了那么这个服务组所负责的这一部分数据好像就丢了，如果挂掉超过一半的服务器组挂掉那么整个 cluster就挂了。原文：https://www.cnblogs.com/fanhuo/p/9672242.html

.NET redis cluster【图】

原文:.NET redis cluster一、下载Windows版本Redis　　下载链接：https://github.com/MSOpenTech/redis/releases（根据系统选择对应版本）二、修改默认的配置文件如上图两个配置文件，redis.windows.conf（应用程序配置文件）;redis.windows-service.conf（Redis windows 服务使用的配置文件）。主要配置：1. bind #IP2.port #端口3.loglevel #日志级别4.logfile #日志保存位置5.dir #数据保存地址6.cluster-enabled yes #启用集...

Redis Cluster部署手册【代码】【图】

Redis Cluster：Redis Cluster提供了一种真正的实时的高可用解决方案，在Redis Cluster集群中，任意一个节点的宕机均不会对服务产生影响，slave角色的节点可以无缝接替宕机的master节点对外继续提供服务。例如，在一个三主三从的Redis Cluster中，Redis Cluster供定义了16384(0~16383)个slots（槽），并将这些slots均匀分布Redis Cluster的三个主节点中，如0~5000个slots属于主节点A，5001~10000个slots属于主节点B，10001~16383个...

jdis操作redis cluster【图】

代码不太了解：代码： 650) this.width=650;" src="/upload/getfiles/default/2022/11/9/20221109090436866.jpg" title="clipboard.png" />2.spring650) this.width=650;" src="/upload/getfiles/default/2022/11/9/20221109090437420.jpg" title="clipboard.png" />650) this.width=650;" src="/upload/getfiles/default/2022/11/9/20221109090437576.jpg" title="clipboar3d.png" />本文出自 “砖家博客” 博客，请务必保留此...

centos 7磁盘空间满了导致redis cluster问题和kafka的问题

发现java的日志里面老是报错如下日志，还有kafka的消费者收不到消息，看来docker logs kafka日志如下：原因估计是12月23日那天磁盘空间满了，导致redis和kafka异常解决方法：重启了redis的这个节点172.18.144.94:7006重启了kafka就ok了如下是redis cluster的报错 2020-01-16 17:10:00.098 pool-8-thread-3 ERROR com.hp.nova.common.todayuseronline.UserOnlineScheduleJob.userOnlineScheduleJob(UserOnlineScheduleJob.java...

Redis3.0 cluster 配置

Redis Cluster 即 Redis 集群，是 Redis 官方在 3.0 版本推出的一套分布式存储方案。完全去中心化，由多个节点组成，所有节点彼此互联。Redis 客户端可以直接连接任何一节点获取集群中的键值对，不需要中间代理，如果该节点不存在用户所指定的键值，其内部会自动把客户端重定向到键值所在的节点。Redis 集群是一个网状结构，每个节点都通过 TCP 连接跟其他每个节点连接。在一个有 N 个节点的集群中，每个节点都有 N-1 个流出的 TCP...

Redis Cluster 的安装和配置(2)【代码】

51的内容长度限制，这里继续 redis cluster 的简单使用和维护。 7，下面简单测试一下 cluster 7.1 测试数据分布使用 redis-cli 来测试 cluster shard，可以看到 foo->bar 被存储到了 7002 节点上，并且自动跳转到了 7002 上，然后 7002 上 hello-world 是存储在 7000 上，再次重定向到 7000 节点上了。 # -c 选项为进入 cluster mode $ redis-cli -c -p 7000 127.0.0.1:7000> set foo bar -> Redirected to slot [12182] loc...

Redis Cluster集群搭建

1.服务器192.168.1.201192.168.1.204192.168.1.205192.168.1.206192.168.1.207192.168.1.208因为Redis Cluster如果数据冗余是1的话，至少要3个Master和3个Slave。2.安装步骤（1）准备工作mkdir /usr/local/redis_clustermkdir /usr/local/redis_cluster （安装所需的文件）cd /usr/local/redis_cluster上传redis-3.2.7.tar.gz和rubygems-2.6.10.tgz（其它的yum安装即可，个人认为应该用高版本比较好兼容，此环境因为其它依赖都已经...

redis集群出现JedisNoReachableClusterNodeException异常(No reachable node in cluster)【图】

上午午好好的，突然抛了如下异常：Exception in thread "main" redis.clients.jedis.exceptions.JedisNoReachableClusterNodeException: No reachable node in cluster at redis.clients.jedis.JedisSlotBasedConnectionHandler.getConnection(JedisSlotBasedConnectionHandler.java:57) at redis.clients.jedis.JedisSlotBasedConnectionHandler.getConnectionFromSlot(JedisSlotBasedConnectionHandler.java:74) at red...

redis cluster介绍与gossip协议【代码】【图】

一、redis cluster 介绍自动将数据进行分片，每个 master 上放一部分数据提供内置的高可用支持，部分 master 不可用时，还是可以继续工作的redis cluster架构下的每个redis都要开放两个端口号，比如一个是6379，另一个就是加1w的端口号16379。6379端口号就是redis服务器入口。16379端口号是用来进行节点间通信的，也就是 cluster bus 的东西，cluster bus 的通信，用来进行故障检测、配置更新、故障转移授权。cluster bus 用的是一...

redis 6.0下redis-cluster-proxy代理尝试【代码】【图】

伴随着Redis6.0的发布，作为最令人怦然心动的特性之一，Redis官方同时推出Redis集群的proxy了：redis-cluster-proxy，https://github.com/RedisLabs/redis-cluster-proxy相比从前访问Redis集群时需要制定集群中所有的IP节点相比：1，redis的redis-cluster-proxy实现了redis cluster集群节点的代理（屏蔽），类似于VIP，客户端不需要知道集群中的具体节点个数和主从身份，可以直接通过代理访问集群。2，不仅如此，还是具有一些非常实...

Redis Cluster 的数据分片机制【代码】【图】

原文:Redis Cluster 的数据分片机制上一篇《分布式数据缓存中的一致性哈希算法》文章中讲述了一致性哈希算法的基本原理和实现，今天就以 Redis Cluster 为例，详细讲解一下分布式数据缓存中的数据分片，上线下线时数据迁移以及请求重定向等操作。Redis 集群简介Redis Cluster 是 Redis 的分布式解决方案，在 3.0 版本正式推出，有效地解决了 Redis 分布式方面的需求。Redis Cluster 一般由多个节点组成，节点数量至少为 6 个才能保...

redis（五）Redis-Cluster主要部件【代码】【图】

概述????文章将会总体介绍Redis Cluster的集群模式，介绍之前我们先来看一下 Redis-Sentinel 和 master-slave 和 Redis Cluster 的关系。Redis Cluster 可以是Redis集群的一种方式，可以认为是分片集群，而 master-slave 则是主从集群。 ????上面说到redis-cluster 是分片集群，简易图可以将下图。????使用redis-cluster可以得到以下的收益：对数据自动分片到多个节点继续运行当一部分节点出错的时候，或是当不能与剩下的 cluster...

REDIS - 技术教程分类

Redis 教程 Redis 简介 Redis 安装 Redis 配置 Redis 数据类型 Redis 命令 Redis 键(key) Redis 字符串(String) Redis 哈希(Hash) Redis 列表(List) Redis 集合(Set) Redis 有序集合(sorted set) Redis HyperLogLog Redis 发布订阅 Redis 事务 Redis 脚本 Redis 连接 Redis 服务器 Redis GEO Redis Stream Redis 数据备份与恢复 Redis 安全 Redis 性能测试 Redis 客户端连接 Redis 分区 Redis 全部

REDIS - 最热教程

redis中批量删除key的方法 redis设置密码，取消密码 node.js利用redis数据库缓存数据 PHP swoole和redis异步任务实现方法分析 Laravel使用Redis共享Session步骤详解 mac下卸载干净redis 如何通过命令行修改redis的配置使用Port Forwarding连接k8s集群的pod（...Redis入门（七）——Redis发布订阅 Redis学习笔记2-常用数据类型

首页 / REDIS / Redis Cluster

Redis Cluster

内容导读

内容图文

redis使用中遇到的瓶颈

redis-cluster的优势

redis-cluster名词介绍

redis-cluster简介

集群部署

创建redis-cluster

移动槽

删除节点

添加master节点

添加一个从节点

内容总结

内容备注

内容手机端

【Redis Cluster】教程文章相关的互联网学习教程文章

Docker快速构建Redis集群(cluster)【代码】

php操作redis cluster集群成功实例【代码】【图】

Redis cluster理解

.NET redis cluster【图】

Redis Cluster部署手册【代码】【图】

jdis操作redis cluster【图】

centos 7磁盘空间满了导致redis cluster问题和kafka的问题

Redis3.0 cluster 配置

Redis Cluster 的安装和配置(2)【代码】

Redis Cluster集群搭建

redis集群出现JedisNoReachableClusterNodeException异常(No reachable node in cluster)【图】

redis cluster介绍与gossip协议【代码】【图】

redis 6.0下redis-cluster-proxy代理尝试【代码】【图】

Redis Cluster 的数据分片机制【代码】【图】

redis（五）Redis-Cluster主要部件【代码】【图】

REDIS - 相关标签

REDIS - 技术教程分类

REDIS - 最新教程

REDIS - 最热教程