Linux 搭建 redis 集群

一、启动多个 redis 实例

cd /usr/local
mkdir redis-cluster
cd redis-cluster
mkdir 7001 7002 7003 7004 7005 7006
cp /usr/local/redis/etc/redis.conf /usr/local/redis-cluster/7001/
cp /usr/local/redis/etc/redis.conf /usr/local/redis-cluster/7002/
cp /usr/local/redis/etc/redis.conf /usr/local/redis-cluster/7003/
cp /usr/local/redis/etc/redis.conf /usr/local/redis-cluster/7004/
cp /usr/local/redis/etc/redis.conf /usr/local/redis-cluster/7005/
cp /usr/local/redis/etc/redis.conf /usr/local/redis-cluster/7006/
vi /usr/local/redis-cluster/7001/redis.conf
# 修改如下信息 7002 7003 7004 7005 7006 类似
port 7001
bind 192.168.0.227
daemonize yes
pidfile ./redis_7001.pid
cluster-enabled yes
cluster-config-file nodes-7001.conf
cluster-node-timeout 15000
appendonly yes

# 分别启动6个实例
cd /usr/local/redis-cluster/7001/ && /usr/local/redis/bin/redis-server /usr/local/redis-cluster/7001/redis.conf;
cd /usr/local/redis-cluster/7002/ && /usr/local/redis/bin/redis-server /usr/local/redis-cluster/7002/redis.conf;
cd /usr/local/redis-cluster/7003/ && /usr/local/redis/bin/redis-server /usr/local/redis-cluster/7003/redis.conf;
cd /usr/local/redis-cluster/7004/ && /usr/local/redis/bin/redis-server /usr/local/redis-cluster/7004/redis.conf;
cd /usr/local/redis-cluster/7005/ && /usr/local/redis/bin/redis-server /usr/local/redis-cluster/7005/redis.conf;
cd /usr/local/redis-cluster/7006/ && /usr/local/redis/bin/redis-server /usr/local/redis-cluster/7006/redis.conf;

# 查看 redis 进程
ps -ef | grep redis | grep cluster

# Redis 3.0 以上集群方式是通过 Redis 安装目录下的 bin/redis-trib.tb 脚本创建

二、安装 Ruby

1.安装 Ruby

yum -y install ruby ruby-devel rubygems rpm-build

2.安装 Ruby Redis 驱动

• 下载 redis 驱动
  https://rubygems.org/gems/redis/versions/3.2.1
• 安装驱动
  gem install -l /usr/local/redis-cluster/redis-3.2.1.gem

三、集群搭建及测试

1.创建 Redis 集群

/usr/local/redis-cluster/redis-trib.rb create --replicas 1 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006

2. 测试 Redis 集群

• 连接 Redis 集群

/usr/local/redis/bin/redis-cli -h 192.168.0.227 -p 7001 -c

• 测试

  
  
  image.png

• kill redis 集群
  ps -ef|grep redis|grep cluster|grep -v grep|cut -c 9-15|xargs kill -9

遇到的问题

1.在线安装 reids 驱动时，gem install redis
ERROR: Could not find a valid gem (>= 0) in any repository
解决方案：手动从 https://rubygems.org/gems/redis/versions/3.2.1 下载所需要的 redis 驱动版本

原理

• 去中心化
  Redis Cluster 在设计的时候，考虑到了去中心化，去中间件，也就是说，集群中的每个节点都是平等的，每个节点都保存各自的数据和整个集群的状态。
  每个节点都和其他所有节点连接，而且这些连接保持活跃，这样就保证了我们只需要连接集群中的任意一个节点，就可以获取到其他节点的数据。
• 分配数据
  Redis 集群没有使用统一的一致性哈希来分配数据，而是采用另一种叫做哈希槽（hash slot）的方式来分配的，一致性哈希对集群中新增和删除实例的支持很好，但是哈希槽对向集群新增实例的话，需要额外的操作，需要手动的将slot重新平均的分配到新集群的实例中。
  redis cluster 默认分配了 16384 个slot，当我们set一个key时，会用CRC16算法来取模得到所属的slot，然后将这个key分到哈希槽区间的节点上，具体算法就是：CRC16(key)%16384。
• 可用性
  Redis 集群会把数据存在一个master节点，然后在这个master和其对应的salve之间进行数据同步。当读取数据时，也根据一致性哈希算法到对应的master节点获取数据。只有当一个master 挂掉之后，才会启动一个对应的salve节点，充当master。

需要注意的是：必须要3个或以上的主节点，否则在创建集群时会失败，并且当存活的主节点数小于总节点数的一半时，整个集群就无法提供服务了。