搭建Redis3.2.8单机分布式集群

Redis
  1. 集群环境安装
    1. 安装Redis
    2. 安装Ruby&rubygems
    3. 创建集群环境
    4. 远程访问
    5. 启动Redis实例
  2. 创建集群
    1. 创建集群
    2. 集群信息查看
    3. 保存集群信息
    4. 选举端口检测

集群环境安装

安装Redis

安装方法有很多，就不一一写了

1
2
3
4
5
6
7
$ cd /usr/local #安装目录
$ wget http://download.redis.io/releases/redis-3.2.8.tar.gz
$ tar xzf redis-3.2.8.tar.gz
$ mv redis-3.2.8/ redis
$ cd redis
$ make
$ make install

也可使用:一键安装，修改public/versions.conf对应版本号即可

注意：官方给的命令少了make install,致redis-server只能在redis的src目录下使用

安装Ruby&rubygems

1
$ yum install ruby ruby-devel rubygems

创建集群环境

创建集群需要的目录[至少需要6个，3个master,3个slave，公式6+2N]

1
2
3
4
5
6
$ mkdir -p /usr/local/redis/cluster/16001/
$ mkdir -p /usr/local/redis/cluster/16002/
$ mkdir -p /usr/local/redis/cluster/16003/
$ mkdir -p /usr/local/redis/cluster/16004/
$ mkdir -p /usr/local/redis/cluster/16005/
$ mkdir -p /usr/local/redis/cluster/16006/

复制redis.conf到每个节点下

1
2
3
4
5
6
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16001/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16002/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16003/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16004/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16005/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16006/redis.conf

然后修改每个节点下的redis.conf，主要修改内容如下

1
2
3
4
5
6
7
8
9
10
11
12
13
port <端口>
daemonize yes
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
logfile "redis-server.log"
appendonly yes

远程访问

  • 远程访问配置
    如果要远程访问，需要修改redis.conf中的bind

默认是127.0.0.1回环地址，如果要远程访问，需要修改成局域网地址 或者 修改成 0.0.0.0,当然也可以使用双地址模式，比如我的局域网地址是192.168.12.213，此外，服务器上的ip一般是固定的，那么可以修改成如下方式

1
2
$ bind  192.168.12.213 127.0.0.1 #推荐
$ bind  0.0.0.0 #不推荐

  • 开放防火墙端口

    1
    2
    3
    4
    5
    6
    $ iptables -I INPUT -p tcp --dport 16001 -j ACCEPT
    $ iptables -I INPUT -p tcp --dport 16002 -j ACCEPT
    $ iptables -I INPUT -p tcp --dport 16003 -j ACCEPT
    $ iptables -I INPUT -p tcp --dport 16004 -j ACCEPT
    $ iptables -I INPUT -p tcp --dport 16005 -j ACCEPT
    $ iptables -I INPUT -p tcp --dport 16006 -j ACCEPT

  • telnet连接

    1
    telnet 192.168.12.213 16001

启动Redis实例

分别启动这6个redis实例（此时，节点均以Redis Cluster的方式运行，但并没有自动构建集群，因为还处于“我不认识你，你不属于我”的状态，它们每个都是孤零零的Redis节点，或者说只包含了一个节点的集群）

1
2
3
4
5
6
7
8
9
10
11
$ cd /usr/local/redis/cluster/16001 && redis-server redis.conf > redis-server.log 2>&1 &
$ cd /usr/local/redis/cluster/16002 && redis-server redis.conf > redis-server.log 2>&1 &
$ cd /usr/local/redis/cluster/16003 && redis-server redis.conf > redis-server.log 2>&1 &
$ cd /usr/local/redis/cluster/16004 && redis-server redis.conf > redis-server.log 2>&1 &
$ cd /usr/local/redis/cluster/16005 && redis-server redis.conf > redis-server.log 2>&1 &
$ cd /usr/local/redis/cluster/16006 && redis-server redis.conf > redis-server.log 2>&1 &

命令中的 2>&1表示标准错误流输入到标准输出流中，也就是输入到每个节点的redis-server.log中，至于最后的 &表示是否后台启动，在linux上redis-server本身就是后台启动，因此这个& 可以不加

通过 tail命令监听每个redis-server.log的变化

1
tail -f /usr/local/redis/cluster/16002/redis-server.log

上面的所有redis启动之后，我们可以通过如下命令中的任何一条命令进行检测

1
2
3
4
5
6
7
8
9
$ netstat -lntp | grep 'redis*'
$ ps -e | grep 'redis*'
$ lsof -i 4 TCP
$ hping --scan 16001-16006 -S 192.168.12.213
$ nmap -sS  192.168.12.213 -p 1600-16007

创建集群

###安装redis gem插件
安装支持redis的gem工具，否则会报错

1
$ gem install  redis --version 3.0.0

注意：gem install redis --version 3.0.0 失败的话，需要修改一下gem的源
参考文档：https://gems.ruby-china.org/
gem sources --add https://gems.ruby-china.org/ --remove https://rubygems.org/

创建集群

让上面的实例互相通讯（1 表示为每个master分配一个salve）

1
2
3
4
5
6
7
$ /usr/local/redis/src/redis-trib.rb create --replicas 1 \
127.0.0.1:16001 \
127.0.0.1:16002 \
127.0.0.1:16003 \
127.0.0.1:16004 \
127.0.0.1:16005 \
127.0.0.1:16006

集群信息查看

  • 集群创建完成
    可以使用下面的命令查看相关信息： 

    1
    2
    3
    4
    5
    6
    7
    8
    #查看集群目前状况
    $ redis-cli -c -p 16001
    #关闭其中一个节点
    $ redis-cli -p 16001 shutdown
    #打印集群的信息
    $ redis-cli cluster info
    #列出集群当前已知的所有节点（node），以及这些节点的相关信息。
    $ redis-cli cluster nodes

  • 输出信息：

    1
    2
    3
    4
    5
    6
    127.0.0.1:16002 master - 0 1439345771781 2 connected 5461-10922
    127.0.0.1:16003 master - 0 1439345772286 3 connected 10923-16383
    127.0.0.1:16001 myself,master - 0 0 1 connected 0-5460
    127.0.0.1:16004 slave 2566ea486fc30c911aafaf1b71130fd24a38dba9 0 1439345772791 4 connected
    127.0.0.1:16005 slave edea1e50bd224c6895b1904bce79e83fa07d6017 0 1439345772286 5 connected
    127.0.0.1:16006 slave ab06e033698627ce0ecd4c8c645585a1ae70cc84 0 1439345771276 6 connected

从上面的信息可以明显看到哪些是主节点、从节点。

保存集群信息

将节点的配置文件保存到硬盘里

1
$ redis-cli cluster saveconfig

连接端口（可以使用其他端口测试16001 -> 16006）

1
2
3
$ redis-cli -c -p 16001
$ 127.0.0.1:16001> set key001 v001
$ 127.0.0.1:16001> get key001

选举端口检测

如果细心的话，你就会发现，在我们创建了集群之后，启动了一些新的端口

通过如下命令

1
netstat -lntp | grep 'redis'

你就会找到如下端口，这些端口是用来进行选举和主备切换的

1
26001 26002 26003 26004 26005 26006

当前网速较慢或者你使用的浏览器不支持博客特定功能，请尝试刷新或换用Chrome、Firefox等现代浏览器