linuxsir首页 LinuxSir.Org | Linux、BSD、Solaris、Unix | 开源传万世,因有我参与欢迎您!
网站首页 | 设为首页 | 加入收藏
您所在的位置:主页 > Linux数据库 >

Redis Cluster集群配置简述

时间:2017-03-16  来源:未知  作者:linuxsir首页

环境:

CentOS 6.7

Redis 3.0.3

3台虚拟机,IP分别是server1:192.168.1.1    server2:192.168.1.2     server3:   192.168.1.3

(因redis机器最少要有3主3从,这里就用3台虚拟机来方便区分,实在没机器的可以在1台机上开6个节点)

拿到机器后,首先把环境弄好

yum groupinstall "Development tools" -y
yum install wget -y

首先安装redis

cd /usr/local/src/
wget http://download.redis.io/releases/redis-3.0.3.tar.gz
tar -zxvf redis-3.0.3.tar.gz

解压出来后要到目录里面编译安装

cd redis-3.0.3
make  && make install

在这里,可能会出现如下错误:(如没有,请略过)

make[1]: Entering directory `/redis/src'
CC adlist.o
In file included from adlist.c:34:
zmalloc.h:50:31: error: jemalloc/jemalloc.h: No such file or directory
zmalloc.h:55:2: error: #error "Newer version of jemalloc required"
make[1]: *** [adlist.o] Error 1
make[1]: Leaving directory `/redis/src'
make: *** [all] Error 2

原因是没有安装jemalloc内存分配器,可以安装jemalloc 或 直接 输入make MALLOC=libc  && make install

安装好redis后就是要创建节点了,3主3从总共6个

以server1为例

首先创建redis集群的目录

cd /usr/local
mkdir redis
cd ./redis

然后把刚才已经编译好的redis包复制过来

cp  -r  /usr/local/src/redis-3.0.3 /usr/local/redis/ && mv /usr/local/redis/redis-3.0.3  7000   #这里以7000 7001 端口为例,为方便管理把文件夹以端口号命名
cp  -r  /usr/local/src/redis-3.0.3 /usr/local/redis/ && mv /usr/local/redis/redis-3.0.3  7001

此步骤分别在其余的2台机子上重复一遍,那么redis的6个节点就算简历完毕。

接下来要做的就是修改各个节点的配置文件

以7000节点为例:

cd /usr/local/redis/7000
vi redis.conf     #主要修改一下这几个参数
daemonize    yes                       #后台运行redis
pidfile  /var/run/redis_7000.pid    #pidfile文件对应7000
port  7000                            #监听的端口号
cluster-enabled  yes         #开启集群,这个原本有的把注释#去掉就好了
cluster-config-file  nodes.conf  #集群的配置  配置文件首次启动自动生成
cluster-node-timeout  5000      #请求超时的时间
appendonly  yes       #aof日志开启,按需开启,每次写操作都会记录成1条日志
bind  192.168.1.1     #这里要改成server的IP,不改的话后续会报错

其他节点的配置只需把pidfile对应的文件和端口号改下就好了,一般建议7000 7001 7002 这样一直写上去

当所有的节点都配置好后,就启动redis了

cd /usr/local/redis/7000
redis-server ./redis.conf        
#这里是先进到7000节点的目录再开启,因为我发现如果直接输入 redis-server /usr/local/redis/7000/redis.conf的话,自动生成的appendonly.aof  nodes.conf文件会在当前目录下,而不是在对应节点的目录下。大家可以试验一下。
启动完成后,循例检查下。
ps aux |grep redis              netstat -an |grep 7000/7001

正常情况下是可以看到7000  7001  17000 17001端口的

7000,7001是用于客户端访问,17000,17001是用于集群内部节点之间的访问的

当所有的节点都配置并启动完之后,我们要做的就是利用这些节点来创建集群

官方提供了一个专门的工具   redis-trib.rb  

配合使用redis-trib.rb还要安装ruby

yum -y install ruby ruby-devel rubygems rpm-build

装好后再用gem命令来安装redis接口,至于这个gem的话我也不大了解,

gem install redis

在3台server上都安装好后,就可以开始创建集群了

/usr/local/redis/7000/src/redis-trib.rb

运行redis-trib.rb后就可以看到redis-trib.rb的具体用法,如下:

Usage: redis-trib <command><options><arguments ...>
  reshard        host:port
                  --to <arg>
                  --yes
                  --slots <arg>
                  --from <arg>
  check          host:port
  call            host:port command arg arg .. arg
  set-timeout    host:port milliseconds
  add-node        new_host:new_port existing_host:existing_port
                  --master-id <arg>
                  --slave
  del-node        host:port node_id
  fix            host:port
  import          host:port
                  --from <arg>
  help            (show this help)
  create          host1:port1 ... hostN:portN
                  --replicas <arg>
For check, fix, reshard, del-node, set-timeout you can specify the host and port of any working node in the cluster.

那么我们这里用的是create 新建集群

/usr/local/redis/7000/src/redis-trib.rb  create  --replicas  1  192.168.1.1:7000  192.168.1.2:7000 192.168.1.3:7000  192.168.1.1:7001  192.168.1.2:7001  192.168.1.3:7001

这里讲一下,使用iptables或者其他防火墙的话一定要把端口开放出来,否则会创建失败。

命令一定要以IP:端口形式来输入,千万别用域名。

参数 --replicas 1   是自动为每台master配置1个slave   上面有6个节点 会按规则生成3个主节点(master)3个从节点(slave)

注意:前面3个IP redis会默认他为主节点。

输入完命令后会提示

Can I set the above configuration? (type 'yes' to accept): 

这里输入yes 就可以了

然后就会弹出如下信息:

>>> Performing Cluster Check (using node 127.0.0.1:7000)
M: 5ca195e70a7d6d3b2756f06bfd5bb62f133ad236 127.0.0.1:7000
   slots:10923-16383 (5461 slots) master
   1 additional replica(s)
M: a79ab5c1558f64d37efb6ad3e775bcd32bee70fc 192.168.20.186:7000
   slots:0-5460 (5461 slots) master
   1 additional replica(s)
S: ebbc18dca8215930cf6430c39671b7660ca1de0f 192.168.20.187:7001
   slots: (0 slots) slave
   replicates 5ca195e70a7d6d3b2756f06bfd5bb62f133ad236
S: c195573125f0d0a87b0f1076dd7de392aa90a5f3 192.168.20.186:7001
   slots: (0 slots) slave
   replicates 0e590350177d69f337dc88188545dfe3c4c75742
M: 0e590350177d69f337dc88188545dfe3c4c75742 192.168.20.184:7000
   slots:5461-10922 (5462 slots) master
   1 additional replica(s)
S: b29210a818e15b1097422933163e92722c624ad8 192.168.20.184:7001
   slots: (0 slots) slave
   replicates a79ab5c1558f64d37efb6ad3e775bcd32bee70fc
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

这样子就可以了。至于测试的话可以从其他文章里面找到

#redis 常见集群报错处理

1.配置完所有主节点后,报" ERR Invalid node address specified"

由于redis-trib.rb 对域名或主机名支持不好,故在创建集群的时候要使用ip:port的方式

redis-trib.rb create ip1:port1 ip2:port2 ip3:port3

2.创建集群时报某个err slot 0 is already busy (redis::commanderror)

这是由于之间创建集群没有成功,需要将nodes.conf和dir里面的文件全部删除(注意不要删除了redis.conf)

3.创建集群时一直处于"Waiting for the cluster to join...................................."的状态

这个问题原因不知,但解决方法是在redis.conf文件中把bind 127.0.0.1本地环回口改为物理接口.

4.安装ruby redis时长时间没响应

这是由于大家知道的网络原因,解决办法是改ruby源(请自行baidu)或手动安装

下面关于Redis的文章您也可能喜欢,不妨参考下:

Ubuntu 14.04下Redis安装及简单测试 http://www.linuxidc.com/Linux/2014-05/101544.htm

CentOS 7下Redis的安装与配置 http://www.linuxidc.com/Linux/2017-02/140363.htm

Ubuntu 14.04安装Redis与简单配置 http://www.linuxidc.com/Linux/2017-01/139075.htm

Ubuntu 16.04环境中安装PHP7.0 Redis扩展 http://www.linuxidc.com/Linux/2016-09/135631.htm

Redis 单机&集群离线安装部署 http://www.linuxidc.com/Linux/2017-03/141403.htm

Linux下Redis集群安装部署及使用详解 http://www.linuxidc.com/Linux/2017-03/141683.htm

CentOS 7.0 安装Redis 3.2.1详细过程和使用常见问题 http://www.linuxidc.com/Linux/2016-09/135071.htm

Ubuntu 16.04环境中安装PHP7.0 Redis扩展 http://www.linuxidc.com/Linux/2016-09/135631.htm

Ubuntu 15.10下Redis集群部署文档 http://www.linuxidc.com/Linux/2016-06/132340.htm

Redis实战 中文PDF http://www.linuxidc.com/Linux/2016-04/129932.htm

Redis热迁移实战总结  http://www.linuxidc.com/Linux/2017-02/141083.htm

Redis3.0配置文件详解  http://www.linuxidc.com/Linux/2017-03/141369.htm

友情链接