首页 / REDIS / Redis Cluster--安装配置

Redis Cluster--安装配置

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Redis Cluster--安装配置，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含8518字，纯文字阅读大概需要13分钟。

内容图文

背景

本篇主要讲Redis Cluster的安装，让我们先用起来，感受一下到底是怎么回事，后面再继续学习有关如何Cluster如何failover,添加节点，删除节点，迁移slots等功能。

Redis Cluster特点

(1)Redis Cluster 共有16384(0-16383)个hash slots,数据写入时，根据CRC16('key')%16384 hash slots分配到不同的节点上；

(2)当整个集群部分节点crash不影响继续使用，如有A,B,C三个master和A1,B1,C1三个slave组成的cluster,如果B宕机，则B1会自动提成为master,当B恢复之后，也会自动成为B1的slave,保证集群的高可用性；

(3)当集群负载比较高，不足以支撑现在的业务，可以添加空节点，然后rebalance slot或者reshard slot；

安装Redis Cluster

(1)环境准备

Redis版本都是3.2.9,有6个redis实例分别在6台不同的主机上运行，其中3个作为Master,另外3个分别作为它们的Slave存在，端口统一使用默认的端口6379；

Master1: sht-sgmhadoopcm-01(172.16.101.54)

Slave1: sht-sgmhadoopdn-01 (172.16.101.58)

Master2: sht-sgmhadoopnn-01 (172.16.101.55)

Slave2: sht-sgmhadoopdn-02 (172.16.101.59)

Master3: sht-sgmhadoopnn-02 (172.16.101.56)

Slave3: sht-sgmhadoopdn-03 (172.16.101.60)

#修改配置文件，每个节点都需要执行，修改其他节点对应的IP地址

[root@sht-sgmhadoopcm-01 redis]# vim redis.conf

port 6379

bind 172.16.101.54

appendonly yes

cluster-enabled yes

cluster-config-file nodes-6379.conf

cluster-node-timeout 15000

(2)在需要ruby的节点上安装ruby

[root@sht-sgmhadoopcm-01 redis]# yum install ruby -y

#下面这一步可能报错，因为CentOS7.3默认安装的ruby2.0.0，版本太低

[root@sht-sgmhadoopcm-01 redis]# gem install redis

Fetching: redis-4.0.1.gem (100%)

Successfully installed redis-4.0.1

Parsing documentation for redis-4.0.1

Installing ri documentation for redis-4.0.1

Done installing documentation for redis after 2 seconds

1 gem installed

(3)启动所有节点

[root@sht-sgmhadoopcm-01 redis]# src/redis-server redis.conf

[root@sht-sgmhadoopnn-02 redis]# src/redis-server redis.conf

[root@sht-sgmhadoopnn-01 redis]# src/redis-server redis.conf

[root@sht-sgmhadoopdn-01 redis]# src/redis-server redis.conf

[root@sht-sgmhadoopdn-02 redis]# src/redis-server redis.conf

[root@sht-sgmhadoopdn-03 redis]# src/redis-server redis.conf

[root@sht-sgmhadoopnn-02 redis]# ps -ef|grep redis

root 1716 1 0 12:40 ? 00:00:00 src/redis-server 172.16.101.56:6379 [cluster]

root 1720 1504 0 12:41 pts/2 00:00:00 grep --color=auto redis

(4)使用redis-trib.rb脚本创建cluster

Create的过程中已经给三个master分配好了hash slots,并且制定好Slave;

选项--replicas 1 表示为每个创建的主服务器节点创建一个从服务器节点;

[root@sht-sgmhadoopcm-01 redis]# ruby src/redis-trib.rb create --replicas 1 172.16.101.54:6379 172.16.101.55:6379 172.16.101.56:6379 172.16.101.58:6379 172.16.101.59:6379 172.16.101.60:6379

>>> Creating cluster

>>> Performing hash slots allocation on 6 nodes...

Using 3 masters:

172.16.101.54:6379

172.16.101.55:6379

172.16.101.56:6379

Adding replica 172.16.101.58:6379 to 172.16.101.54:6379

Adding replica 172.16.101.59:6379 to 172.16.101.55:6379

Adding replica 172.16.101.60:6379 to 172.16.101.56:6379

M: 610aa83831404be545b25cc7f7322e987da1dd33 172.16.101.54:6379

slots:0-5460 (5461 slots) master

M: 4c7348ac575a1a3bd4357e937a8f94f1654193cf 172.16.101.55:6379

slots:5461-10922 (5462 slots) master

M: ece3a80f6989fa7f8316d73ee30ceea84340f24e 172.16.101.56:6379

slots:10923-16383 (5461 slots) master

S: 28e8d5c8fd12533622d8110f8d262cb50120ca02 172.16.101.58:6379

replicates 610aa83831404be545b25cc7f7322e987da1dd33

S: b50ba506525ee547823b3d9a7e5a095933e3ff42 172.16.101.59:6379

replicates 4c7348ac575a1a3bd4357e937a8f94f1654193cf

S: c79de1092011ed395ee772969274c0567c2b5dd1 172.16.101.60:6379

replicates ece3a80f6989fa7f8316d73ee30ceea84340f24e

Can I set the above configuration? (type 'yes' to accept): yes

>>> Nodes configuration updated

>>> Assign a different config epoch to each node

>>> Sending CLUSTER MEET messages to join the cluster

Waiting for the cluster to join.....

>>> Performing Cluster Check (using node 172.16.101.54:6379)

M: 610aa83831404be545b25cc7f7322e987da1dd33 172.16.101.54:6379

slots:0-5460 (5461 slots) master

1 additional replica(s)

S: b50ba506525ee547823b3d9a7e5a095933e3ff42 172.16.101.59:6379

slots: (0 slots) slave

replicates 4c7348ac575a1a3bd4357e937a8f94f1654193cf

S: 28e8d5c8fd12533622d8110f8d262cb50120ca02 172.16.101.58:6379

slots: (0 slots) slave

replicates 610aa83831404be545b25cc7f7322e987da1dd33

M: 4c7348ac575a1a3bd4357e937a8f94f1654193cf 172.16.101.55:6379

slots:5461-10922 (5462 slots) master

1 additional replica(s)

M: ece3a80f6989fa7f8316d73ee30ceea84340f24e 172.16.101.56:6379

slots:10923-16383 (5461 slots) master

1 additional replica(s)

S: c79de1092011ed395ee772969274c0567c2b5dd1 172.16.101.60:6379

slots: (0 slots) slave

replicates ece3a80f6989fa7f8316d73ee30ceea84340f24e

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[OK] All 16384 slots covered.

(5)查看Cluster基本信息

[root@sht-sgmhadoopcm-01 redis]# src/redis-cli -c -h 172.16.101.54 -p 6379

172.16.101.54:6379> info replication

# Replication

role:master

connected_slaves:1

slave0:ip=172.16.101.58,port=6379,state=online,offset=2591,lag=0

master_repl_offset:2591

repl_backlog_active:1

repl_backlog_size:1048576

repl_backlog_first_byte_offset:2

repl_backlog_histlen:2590

172.16.101.54:6379> cluster info

cluster_state:ok

cluster_slots_assigned:16384

cluster_slots_ok:16384

cluster_slots_pfail:0

cluster_slots_fail:0

cluster_known_nodes:6

cluster_size:3

cluster_current_epoch:6

cluster_my_epoch:1

cluster_stats_messages_sent:4462

cluster_stats_messages_received:4462

172.16.101.54:6379> cluster nodes

b50ba506525ee547823b3d9a7e5a095933e3ff42 172.16.101.59:6379 slave 4c7348ac575a1a3bd4357e937a8f94f1654193cf 0 1532497136876 5 connected

610aa83831404be545b25cc7f7322e987da1dd33 172.16.101.54:6379 myself,master - 0 0 1 connected 0-5460

28e8d5c8fd12533622d8110f8d262cb50120ca02 172.16.101.58:6379 slave 610aa83831404be545b25cc7f7322e987da1dd33 0 1532497135872 4 connected

4c7348ac575a1a3bd4357e937a8f94f1654193cf 172.16.101.55:6379 master - 0 1532497133867 2 connected 5461-10922

ece3a80f6989fa7f8316d73ee30ceea84340f24e 172.16.101.56:6379 master - 0 1532497134870 3 connected 10923-16383

c79de1092011ed395ee772969274c0567c2b5dd1 172.16.101.60:6379 slave ece3a80f6989fa7f8316d73ee30ceea84340f24e 0 1532497137878 6 connected

[root@sht-sgmhadoopcm-01 redis]# cat nodes-6379.conf

b50ba506525ee547823b3d9a7e5a095933e3ff42 172.16.101.59:6379 slave 4c7348ac575a1a3bd4357e937a8f94f1654193cf 0 1532493960094 5 connected

610aa83831404be545b25cc7f7322e987da1dd33 172.16.101.54:6379 myself,master - 0 0 1 connected 0-5460

28e8d5c8fd12533622d8110f8d262cb50120ca02 172.16.101.58:6379 slave 610aa83831404be545b25cc7f7322e987da1dd33 0 1532493955077 4 connected

4c7348ac575a1a3bd4357e937a8f94f1654193cf 172.16.101.55:6379 master - 0 1532493958087 2 connected 5461-10922

ece3a80f6989fa7f8316d73ee30ceea84340f24e 172.16.101.56:6379 master - 0 1532493956080 3 connected 10923-16383

c79de1092011ed395ee772969274c0567c2b5dd1 172.16.101.60:6379 slave ece3a80f6989fa7f8316d73ee30ceea84340f24e 0 1532493959091 6 connected

vars currentEpoch 6 lastVoteEpoch 0

FAQ

Error1: ruby2.0.0版本太低

[root@sht-sgmhadoopcm-01 redis]# gem install redis

Fetching: redis-4.0.1.gem (100%)

ERROR: Error installing redis:

redis requires Ruby version >= 2.2.2.

解决方法：

[root@sht-sgmhadoopcm-01 redis]# ruby --version

ruby 2.0.0p648 (2015-12-16) [x86_64-linux]

[root@sht-sgmhadoopcm-01 redis]# gpg --keyserver hkp:// keys.gnupg.net --recv-keys 409B6B1796C275462A1703113804BB82D39DC0E3 7D2BAF1CF37B13E2069D6956105BD0E739499BDB

[root@sht-sgmhadoopcm-01 redis]# curl -sSL https://get.rvm.io | bash -s stable

[root@sht-sgmhadoopcm-01 redis]# find / -name rvm -print

/usr/local/rvm

/usr/local/rvm/src/rvm

/usr/local/rvm/src/rvm/bin/rvm

/usr/local/rvm/src/rvm/lib/rvm

/usr/local/rvm/src/rvm/scripts/rvm

/usr/local/rvm/bin/rvm

/usr/local/rvm/lib/rvm

/usr/local/rvm/scripts/rvm

[root@sht-sgmhadoopcm-01 redis]# source /usr/local/rvm/scripts/rvm

[root@sht-sgmhadoopcm-01 redis]# rvm list known

[root@sht-sgmhadoopcm-01 redis]# rvm install 2.4.1

[root@sht-sgmhadoopcm-01 redis]# rvm use 2.4.1

Using /usr/local/rvm/gems/ruby-2.4.1

[root@sht-sgmhadoopcm-01 redis]# rvm use 2.4.1 --default

Using /usr/local/rvm/gems/ruby-2.4.1

[root@sht-sgmhadoopcm-01 redis]# rvm remove 2.3.4

ruby-2.3.4 - #already gone

Using /usr/local/rvm/gems/ruby-2.4.1

[root@sht-sgmhadoopcm-01 redis]# ruby --version

ruby 2.4.1p111 (2017-03-22 revision 58053) [x86_64-linux]

Error2：添加节点数据不为空

[root@sht-sgmhadoopcm-01 redis]# src/redis-trib.rb add-node 172.16.101.66:6379 172.16.101.54:6379

......

[ERR] Node 172.16.101.66:6379 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0.

解决方法：

(1)删除aof和rdb文件

(2)删除nodes-6379.conf配置文件

(3)执行flushdb and flushall

参考链接

https://redis.io/topics/cluster-tutorial

原文：http://blog.51cto.com/darrenmemos/2151566

内容总结

以上是互联网集市为您收集整理的Redis Cluster--安装配置全部内容，希望文章能够帮你解决Redis Cluster--安装配置所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1062561.html

来源：【匿名】

【上一篇】通过redis-rdb-tools分析redis内存使用量【下一篇】redis可以做什么？

更多 ►

【Redis Cluster--安装配置】教程文章相关的互联网学习教程文章

Docker快速构建Redis集群(cluster)【代码】

Docker快速构建Redis集群(cluster)以所有redis实例运行在同一台宿主机上为例子搭建步骤redis集群目录清单. ├── Dockerfile ├── make_master_slave.sh ├── run_master_slave.sh ├── compose_master_slave.sh ├── redis-trib.rb ├── master │?? ├── 7000 │?? │?? ├── data │?? │?? │?? ├── appendonly.aof │?? │?? │?? ├── dump.rdb │?? │?? │?? └── nodes.conf │?? │?? └── redi...

php操作redis cluster集群成功实例【代码】【图】

java操作redis cluster集群可使用jredisphp要操作redis cluster集群有两种方式：1、使用phpredis扩展，这是个c扩展，性能更高，但是phpredis2.x扩展不行，需升级phpredis到3.0，但这个方案参考资料很少2、使用predis，纯php开发，使用了命名空间，需要php5.3+，灵活性高我用的是predis，下载地址https://github.com/nrk/predis...下载好后重命名为predis，server1：192.168.1.198server2：192.168.1.199predis.php <?php require ‘...

Redis cluster理解

这个模式像是把Redis的并发按配置分配给多个Redis服务组（sentinel）,当服务组中的主服务器挂掉后用从服务器顶上，如果服务组中的服务器都挂了那么这个服务组所负责的这一部分数据好像就丢了，如果挂掉超过一半的服务器组挂掉那么整个 cluster就挂了。原文：https://www.cnblogs.com/fanhuo/p/9672242.html

.NET redis cluster【图】

原文:.NET redis cluster一、下载Windows版本Redis　　下载链接：https://github.com/MSOpenTech/redis/releases（根据系统选择对应版本）二、修改默认的配置文件如上图两个配置文件，redis.windows.conf（应用程序配置文件）;redis.windows-service.conf（Redis windows 服务使用的配置文件）。主要配置：1. bind #IP2.port #端口3.loglevel #日志级别4.logfile #日志保存位置5.dir #数据保存地址6.cluster-enabled yes #启用集...

Redis Cluster部署手册【代码】【图】

Redis Cluster：Redis Cluster提供了一种真正的实时的高可用解决方案，在Redis Cluster集群中，任意一个节点的宕机均不会对服务产生影响，slave角色的节点可以无缝接替宕机的master节点对外继续提供服务。例如，在一个三主三从的Redis Cluster中，Redis Cluster供定义了16384(0~16383)个slots（槽），并将这些slots均匀分布Redis Cluster的三个主节点中，如0~5000个slots属于主节点A，5001~10000个slots属于主节点B，10001~16383个...

jdis操作redis cluster【图】

代码不太了解：代码： 650) this.width=650;" src="/upload/getfiles/default/2022/11/9/20221109090436866.jpg" title="clipboard.png" />2.spring650) this.width=650;" src="/upload/getfiles/default/2022/11/9/20221109090437420.jpg" title="clipboard.png" />650) this.width=650;" src="/upload/getfiles/default/2022/11/9/20221109090437576.jpg" title="clipboar3d.png" />本文出自 “砖家博客” 博客，请务必保留此...

centos 7磁盘空间满了导致redis cluster问题和kafka的问题

发现java的日志里面老是报错如下日志，还有kafka的消费者收不到消息，看来docker logs kafka日志如下：原因估计是12月23日那天磁盘空间满了，导致redis和kafka异常解决方法：重启了redis的这个节点172.18.144.94:7006重启了kafka就ok了如下是redis cluster的报错 2020-01-16 17:10:00.098 pool-8-thread-3 ERROR com.hp.nova.common.todayuseronline.UserOnlineScheduleJob.userOnlineScheduleJob(UserOnlineScheduleJob.java...

Redis3.0 cluster 配置

Redis Cluster 即 Redis 集群，是 Redis 官方在 3.0 版本推出的一套分布式存储方案。完全去中心化，由多个节点组成，所有节点彼此互联。Redis 客户端可以直接连接任何一节点获取集群中的键值对，不需要中间代理，如果该节点不存在用户所指定的键值，其内部会自动把客户端重定向到键值所在的节点。Redis 集群是一个网状结构，每个节点都通过 TCP 连接跟其他每个节点连接。在一个有 N 个节点的集群中，每个节点都有 N-1 个流出的 TCP...

Redis Cluster 的安装和配置(2)【代码】

51的内容长度限制，这里继续 redis cluster 的简单使用和维护。 7，下面简单测试一下 cluster 7.1 测试数据分布使用 redis-cli 来测试 cluster shard，可以看到 foo->bar 被存储到了 7002 节点上，并且自动跳转到了 7002 上，然后 7002 上 hello-world 是存储在 7000 上，再次重定向到 7000 节点上了。 # -c 选项为进入 cluster mode $ redis-cli -c -p 7000 127.0.0.1:7000> set foo bar -> Redirected to slot [12182] loc...

Redis Cluster集群搭建

1.服务器192.168.1.201192.168.1.204192.168.1.205192.168.1.206192.168.1.207192.168.1.208因为Redis Cluster如果数据冗余是1的话，至少要3个Master和3个Slave。2.安装步骤（1）准备工作mkdir /usr/local/redis_clustermkdir /usr/local/redis_cluster （安装所需的文件）cd /usr/local/redis_cluster上传redis-3.2.7.tar.gz和rubygems-2.6.10.tgz（其它的yum安装即可，个人认为应该用高版本比较好兼容，此环境因为其它依赖都已经...

redis集群出现JedisNoReachableClusterNodeException异常(No reachable node in cluster)【图】

上午午好好的，突然抛了如下异常：Exception in thread "main" redis.clients.jedis.exceptions.JedisNoReachableClusterNodeException: No reachable node in cluster at redis.clients.jedis.JedisSlotBasedConnectionHandler.getConnection(JedisSlotBasedConnectionHandler.java:57) at redis.clients.jedis.JedisSlotBasedConnectionHandler.getConnectionFromSlot(JedisSlotBasedConnectionHandler.java:74) at red...

redis cluster介绍与gossip协议【代码】【图】

一、redis cluster 介绍自动将数据进行分片，每个 master 上放一部分数据提供内置的高可用支持，部分 master 不可用时，还是可以继续工作的redis cluster架构下的每个redis都要开放两个端口号，比如一个是6379，另一个就是加1w的端口号16379。6379端口号就是redis服务器入口。16379端口号是用来进行节点间通信的，也就是 cluster bus 的东西，cluster bus 的通信，用来进行故障检测、配置更新、故障转移授权。cluster bus 用的是一...

redis 6.0下redis-cluster-proxy代理尝试【代码】【图】

伴随着Redis6.0的发布，作为最令人怦然心动的特性之一，Redis官方同时推出Redis集群的proxy了：redis-cluster-proxy，https://github.com/RedisLabs/redis-cluster-proxy相比从前访问Redis集群时需要制定集群中所有的IP节点相比：1，redis的redis-cluster-proxy实现了redis cluster集群节点的代理（屏蔽），类似于VIP，客户端不需要知道集群中的具体节点个数和主从身份，可以直接通过代理访问集群。2，不仅如此，还是具有一些非常实...

Redis Cluster 的数据分片机制【代码】【图】

原文:Redis Cluster 的数据分片机制上一篇《分布式数据缓存中的一致性哈希算法》文章中讲述了一致性哈希算法的基本原理和实现，今天就以 Redis Cluster 为例，详细讲解一下分布式数据缓存中的数据分片，上线下线时数据迁移以及请求重定向等操作。Redis 集群简介Redis Cluster 是 Redis 的分布式解决方案，在 3.0 版本正式推出，有效地解决了 Redis 分布式方面的需求。Redis Cluster 一般由多个节点组成，节点数量至少为 6 个才能保...

redis（五）Redis-Cluster主要部件【代码】【图】

概述????文章将会总体介绍Redis Cluster的集群模式，介绍之前我们先来看一下 Redis-Sentinel 和 master-slave 和 Redis Cluster 的关系。Redis Cluster 可以是Redis集群的一种方式，可以认为是分片集群，而 master-slave 则是主从集群。 ????上面说到redis-cluster 是分片集群，简易图可以将下图。????使用redis-cluster可以得到以下的收益：对数据自动分片到多个节点继续运行当一部分节点出错的时候，或是当不能与剩下的 cluster...

REDIS - 技术教程分类

Redis 教程 Redis 简介 Redis 安装 Redis 配置 Redis 数据类型 Redis 命令 Redis 键(key) Redis 字符串(String) Redis 哈希(Hash) Redis 列表(List) Redis 集合(Set) Redis 有序集合(sorted set) Redis HyperLogLog Redis 发布订阅 Redis 事务 Redis 脚本 Redis 连接 Redis 服务器 Redis GEO Redis Stream Redis 数据备份与恢复 Redis 安全 Redis 性能测试 Redis 客户端连接 Redis 分区 Redis 全部

REDIS - 最热教程

redis中批量删除key的方法 redis设置密码，取消密码 node.js利用redis数据库缓存数据 PHP swoole和redis异步任务实现方法分析 Laravel使用Redis共享Session步骤详解 mac下卸载干净redis 如何通过命令行修改redis的配置使用Port Forwarding连接k8s集群的pod（...Redis入门（七）——Redis发布订阅 Redis学习笔记2-常用数据类型

首页 / REDIS / Redis Cluster--安装配置

Redis Cluster--安装配置

内容导读

内容图文

内容总结

内容备注

内容手机端

【Redis Cluster--安装配置】教程文章相关的互联网学习教程文章

Docker快速构建Redis集群(cluster)【代码】

php操作redis cluster集群成功实例【代码】【图】

Redis cluster理解

.NET redis cluster【图】

Redis Cluster部署手册【代码】【图】

jdis操作redis cluster【图】

centos 7磁盘空间满了导致redis cluster问题和kafka的问题

Redis3.0 cluster 配置

Redis Cluster 的安装和配置(2)【代码】

Redis Cluster集群搭建

redis集群出现JedisNoReachableClusterNodeException异常(No reachable node in cluster)【图】

redis cluster介绍与gossip协议【代码】【图】

redis 6.0下redis-cluster-proxy代理尝试【代码】【图】

Redis Cluster 的数据分片机制【代码】【图】

redis（五）Redis-Cluster主要部件【代码】【图】

REDIS - 相关标签

REDIS - 技术教程分类

REDIS - 最新教程

REDIS - 最热教程