高可用集群

作者: 数据库信息  发布:2019-11-08

布局文件补充

前几章Redis教程中牵线了以下配置
1 开启Redis 的守护进度 :daemonize yes
2 钦定pid文件写入文件名 :pidfile /var/run/redis.pid
3 指定Redis 端口:port 6379
4 绑定的主机地址 :bind 127.0.0.1
5 Redis悠久化暗中同意开启压缩数量:rdbcompression yes
6 指定rdb文件名:dbfilename dump.rdb
7 钦命rdb文件地点:dir ./
8 从机运维时,它会自行从master举行数量同步:slaveof < masterip> < masterport>
9 展开aof悠久化格局:appendonly yes
10 指定aof文件名:appendfilename appendonly.aof
11 触发aof快照机制:appendfsync everysec (no/always)

本章节是Redis教程中的最平生机勃勃章,把剩余的布局也一同说了啊
1 设置顾客端连接超时时间,0表示关闭 :timeout 300
2 设置Redis日志等第,debug、verbose(暗许)、notice、warning:loglevel verbose
3 设置数据库的数额:databases 16
4 设置Redis连接密码:requirepass foobared
5 设置同一时候最大顾客端连接数,私下认可无界定:maxclients 128
6 点名Redis最大内存约束:maxmemory < bytes>
7 钦命是还是不是启用虚构内部存款和储蓄器机制:vm-enabled no
8 内定虚构内部存储器文件路线:vm-swap-file /tmp/redis.swap
9 点名满含别的的安排文件:include /path/to/local.conf

到此地Redis 的课程就归西了,还应该有任何文化能够访问官方网站学习。有如何窘迫的地点请指正。谢谢!

更加的多内容可学习官方网站:

增添主节点

[root@itdragon bin]# cp redis6005.conf redis6006.conf
[root@itdragon bin]# ./redis-server redis6006.conf
[root@itdragon bin]# ./redis-trib.rb add-node 112.74.83.71:6006 112.74.83.71:6000
[root@itdragon bin]# ./redis-cli -h 112.74.83.71 -p 6000 cluster nodes
916d26e9638dc51e168f32969da11e19c875f48f 112.74.83.71:6006@16006 master - 0 1512115612162 0 connected   # 没有分配槽
[root@itdragon bin]# ./redis-trib.rb reshard 112.74.83.71:6000
How many slots do you want to move (from 1 to 16384)? 500
What is the receiving node ID? 916d26e9638dc51e168f32969da11e19c875f48f
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:all
Do you want to proceed with the proposed reshard plan (yes/no)? yes
[root@itdragon bin]# ./redis-cli -h 112.74.83.71 -p 6000 cluster nodes
916d26e9638dc51e168f32969da11e19c875f48f 112.74.83.71:6006@16006 master - 0 1512116047897 7 connected 0-165 5461-5627 10923-11088

先是步:创制 redis6006.conf 的新主机,并运维Redis服务
其次步:新添主机节点,若打字与印刷"[OK] New node added correctly." 表示增多成功
其三步:查询集群节点新闻,发掘6006端口的主机固然早就拉长,但总是情况前边未有内容,即没分配槽
第四步:给6006端口主机分配槽,

  • 率先个参数:需求移动槽的个数,
  • 第贰个参数:接纳槽的节点ID,
  • 其多个参数:输入"all"表示从具有原节点中获取槽,
  • 第多少个参数:输入"yes"开头活动槽到对象结点id

第五步:查询集群节点新闻,发掘6006端口的主机已经分配了槽

骨干命令:
./redis-trib.rb add-node 新扩充主机ip:port 集群大肆节点ip:port
./redis-trib.rb reshard 集群任性节点ip:port

唯恐存在的难点
[ERR] Sorry, can't connect to node 112.74.83.71:6006
证实:新添的主机必定如果开发银行状态。

集群节点操作

丰裕从节点

[root@itdragon bin]# cp redis6006.conf redis6007.conf
[root@itdragon bin]# vim redis6007.conf 
[root@itdragon bin]# ./redis-server redis6007.conf
[root@itdragon bin]# ./redis-trib.rb add-node --slave --master-id 916d26e9638dc51e168f32969da11e19c875f48f 112.74.83.71:6007 112.74.83.71:6006
[root@itdragon bin]# ./redis-cli -h 112.74.83.71 -p 6000 cluster nodes
80315a4dee2d0fa46b8ac722962567fc903e797a 112.74.83.71:6007@16007 slave 916d26e9638dc51e168f32969da11e19c875f48f 0 1512117377000 7 connected

第一步:创造 redis6007.conf 的新主机,并运行Redis服务
第二步:新扩张从机节点,在原来的授命上多了 --slave --master-id 主节点ID
其三步:查询集群节点音信

主干集群搭建

集群成立命令: ./redis-trib.rb create 创建集群,--replicas 1 给各类主机分配一个从机,前边其余参数都以redis服务的ip:port。最后输入yes来接收建议的安排

[root@itdragon bin]# ./redis-trib.rb create --replicas 1 112.74.83.71:6000 112.74.83.71:6001 112.74.83.71:6002 112.74.83.71:6003 112.74.83.71:6004 112.74.83.71:6005
>>> Creating cluster
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
112.74.83.71:6000
112.74.83.71:6001
112.74.83.71:6002
Adding replica 112.74.83.71:6003 to 112.74.83.71:6000
Adding replica 112.74.83.71:6004 to 112.74.83.71:6001
Adding replica 112.74.83.71:6005 to 112.74.83.71:6002
...... #省略
Can I set the above configuration? (type 'yes' to accept): yes
...... #省略
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered. #有16384个可用的插槽提供服务说明搭建成功

[root@itdragon bin]# ./redis-cli -h 112.74.83.71 -p 6002 -c
112.74.83.71:6002> set testKey value
-> Redirected to slot [5203] located at 112.74.83.71:6000
OK

112.74.83.71:6000> cluster info
cluster_state:ok
......

112.74.83.71:6000> cluster nodes
0968ef8f5ca96681da4abaaf4ca556c2e6dd0242 112.74.83.71:6002@16002 master - 0 1512035804722 3 connected 10923-16383
13ddd4c1b8c00926f61aa6daaa7fd8d87ee97830 112.74.83.71:6005@16005 slave 0968ef8f5ca96681da4abaaf4ca556c2e6dd0242 0 1512035803720 6 connected
a3bb22e04deec2fca653c606edf5b02b819f924f 112.74.83.71:6003@16003 slave 1d4779469053930f30162e89b6711d27a112b601 0 1512035802000 4 connected
1d4779469053930f30162e89b6711d27a112b601 112.74.83.71:6000@16000 myself,master - 0 1512035802000 1 connected 0-5460
a3b99cb5d22f5cbd293179e262f5eda931733c88 112.74.83.71:6001@16001 master - 0 1512035802719 2 connected 5461-10922
915a47afc4f9b94389676b4e14f78cba66be9e5d 112.74.83.71:6004@16004 slave a3b99cb5d22f5cbd293179e262f5eda931733c88 0 1512035801717 5 connected

率先步:搭建集群 ./redis-trib.rb create ,选取yes选取提出的配备
其次步:进入集群顾客端 ./redis-cli -h 任性主机host -p 放肆主机port -c,-c表示以集群方式连接redis
其三步:保存数据
第四步:cluster info 查询集群状态音讯
第五步:cluster nodes 查询集群结点音信,这里有八个坑,后边会介绍

可能存在的难题

Sorry, the cluster configuration file nodes.conf is already used by a different Redis Cluster node. Please make sure that different nodes use different cluster configuration files.

说的很醒目,校正cluster-config-file nodes.conf 文件制止重名,大概去除该公文再次成立集群。

cluster nodes 查询集群节点音信
那是很入眼的指令,大家须要关心的音信有:
第二个参数:节点ID
其次个参数:IP:PORT@TCP 这里贰个坑,jedis-2.9.0早先的版本深入分析@出错
其四个参数:标识(Master,Slave,Myself,Fail...卡塔尔
第八个参数:如若是从机则是主机的节点ID
终极五个参数:连接的景色和槽的职位。

搭建ruby环境

redis集群管理工科具 redis-trib.rb 是依附 ruby 情状。

[root@itdragon ~]# yum install ruby
[root@itdragon ~]# yum install rubygems
[root@itdragon ~]# gem install redis
[root@itdragon ~]# cd redis-4.0.2/src/
[root@itdragon src]# cp redis-trib.rb /usr/local/redis-4/bin/

第一步:安装 ruby 环境
第二步:安装 gem 软件包(gem是用来增加或改革Ruby应用程序的卡塔 尔(阿拉伯语:قطر‎。参谋地址:
其三步:在redis解压目录中找到 redis-trib.rb 文件,将其拷贝到运行redis服务的目录下,方便管理。

大概存在的标题
1 redis requires Ruby version >= 2.2.2,消逝办法如下
2 未有/usr/local/rvm/scripts/rvm 这几个目录.大概是上一步试行倒闭

[root@itdragon ~]# ruby --version
ruby 1.8.7 (2013-06-27 patchlevel 374) [x86_64-linux]
[root@itdragon ~]# yum install curl
[root@itdragon ~]# curl -L get.rvm.io | bash -s stable
[root@itdragon ~]# source /usr/local/rvm/scripts/rvm 
[root@itdragon ~]# rvm list known
[root@itdragon ~]# rvm install 2.3.3
[root@itdragon ~]# rvm use 2.3.3
[root@itdragon ~]# gem install redis

高可用集群搭建

集群(cluster卡塔尔才干是豆蔻梢头种较新的技能,通过集群技艺,能够在提交好低本钱的图景下获得在质量、可信赖性、灵活性方面包车型大巴绝对较高的收入,其任务调治疗原则是集群系统中的大旨技艺。

Redis 3.0 之后便援救集群。Redis 集群中放到了 16384 个哈希槽。Redis 会依据节点数量大致均等的将哈希槽映射到区别的节点。
持有节点之间人机联作互联(PING-PONG机制),当胜过二分之大器晚成的主机以为某台主机挂了,则该主机正是真的挂掉了,整个集群就不可用了。
若给集群中的每台主机分配多台从机。主机挂了,从机上位,照旧能符合规律干活。可是若集群中中国足球球联赛过三分之二的主机挂了,无论是还是不是有从机,该集群也是不可用的。

搭建前的备选专门的学业

预备六台redis服务器

和上风流洒脱章节主从复制逻辑相像,将redis.conf文件拷贝6次,端口从6000~6005

[root@itdragon bin]# cp redis.conf redis6000.conf
[root@itdragon bin]# vim redis6000.conf  
port xxxx                           #修改端口
cluster-enabled yes                 #打开注释,开启集群模式
cluster-config-file nodes-xxxx.conf #集群的配置文件
pidfile /var/run/redis_xxxx.pid     #pidfile文件
logfile "xxxx.log"                  #日志文件
dbfilename dump_xxxx.rdb            #rdb持久化文件
cluster-node-timeout 5000           #请求超时,单位毫秒
appendonly yes                      #开启aof持久化方式
[root@itdragon bin]# vim start-all.sh
./redis-server redis6000.conf
./redis-server redis6001.conf
./redis-server redis6002.conf
./redis-server redis6003.conf
./redis-server redis6004.conf
./redis-server redis6005.conf
[root@itdragon bin]# chmod u x start-all.sh
[root@itdragon bin]# ./start-all.sh 
[root@itdragon bin]# ps aux | grep redis
root     28001  0.0  0.9 145964  9696 ?        Ssl  17:45   0:00 ./redis-server 112.74.83.71:6000 [cluster]
root     28003  0.0  0.9 145964  9696 ?        Ssl  17:45   0:00 ./redis-server 112.74.83.71:6001 [cluster]
root     28008  0.0  0.9 145964  9656 ?        Ssl  17:45   0:00 ./redis-server 112.74.83.71:6002 [cluster]
root     28013  0.0  0.9 145964  9656 ?        Ssl  17:45   0:00 ./redis-server 112.74.83.71:6003 [cluster]
root     28018  0.1  0.9 145964  9652 ?        Ssl  17:45   0:00 ./redis-server 112.74.83.71:6004 [cluster]
root     28023  0.0  0.9 145964  9656 ?        Ssl  17:45   0:00 ./redis-server 112.74.83.71:6005 [cluster]

先是步:复制三个redis.conf 并纠正相关布署,假诺以为辛勤能够用自家布署的文书:
第二步:新添批量敞开redis服务程序,并追加试行权限
其三步:查看六台redis服务是还是不是运行成功

Jedis 连接集群

首先要布局防火墙

[root@itdragon ~]# vim /etc/sysconfig/iptables
-A INPUT -p tcp -m tcp --dport 6000 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 6001 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 6002 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 6003 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 6004 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 6005 -j ACCEPT
[root@itdragon ~]# service iptables restart

最后是组成Spring

<!-- jedis集群版配置 -->
<bean id="redisClient" class="redis.clients.jedis.JedisCluster">
    <constructor-arg name="nodes">
        <set>
            <bean class="redis.clients.jedis.HostAndPort">
                <constructor-arg name="host" value="${redis.host}"></constructor-arg>
                <constructor-arg name="port" value="6000" />
            </bean>
            <bean class="redis.clients.jedis.HostAndPort">
                <constructor-arg name="host" value="${redis.host}"></constructor-arg>
                <constructor-arg name="port" value="6001" />
            </bean>
            <bean class="redis.clients.jedis.HostAndPort">
                <constructor-arg name="host" value="${redis.host}"></constructor-arg>
                <constructor-arg name="port" value="6002" />
            </bean>
            <bean class="redis.clients.jedis.HostAndPort">
                <constructor-arg name="host" value="${redis.host}"></constructor-arg>
                <constructor-arg name="port" value="6003" />
            </bean>
            <bean class="redis.clients.jedis.HostAndPort">
                <constructor-arg name="host" value="${redis.host}"></constructor-arg>
                <constructor-arg name="port" value="6004" />
            </bean>
            <bean class="redis.clients.jedis.HostAndPort">
                <constructor-arg name="host" value="${redis.host}"></constructor-arg>
                <constructor-arg name="port" value="6005" />
            </bean>
        </set>
    </constructor-arg>
    <constructor-arg name="poolConfig" ref="jedisPoolConfig" />
</bean>
<bean id="jedisClientCluster" class="com.itdragon.service.impl.JedisClientCluster"></bean>

单元测量试验

/**
 * 集群版测试
 * 若提示以下类似的错误:
 * java.lang.NumberFormatException: For input string: "6002@16002"
 * 若安装的redis 版本大于4,则可能是jedis 的版本低了。选择 2.9.0
 * 因为 cluster nodes 打印的信息中,4版本之前的是没有 @16002 tcp端口信息
 * 0968ef8f5ca96681da4abaaf4ca556c2e6dd0242 112.74.83.71:6002@16002 master - 0 1512035804722 3 connected 10923-16383
 */
@Test
public void testJedisCluster() throws IOException {
    HashSet<HostAndPort> nodes = new HashSet<>();
    nodes.add(new HostAndPort(HOST, 6000));
    nodes.add(new HostAndPort(HOST, 6001));
    nodes.add(new HostAndPort(HOST, 6002));
    nodes.add(new HostAndPort(HOST, 6003));
    nodes.add(new HostAndPort(HOST, 6004));
    nodes.add(new HostAndPort(HOST, 6005));
    JedisCluster cluster = new JedisCluster(nodes);
    cluster.set("cluster-key", "cluster-value");
    System.out.println("集群测试 : "   cluster.get("cluster-key"));
    cluster.close();
}

兴许存在的主题材料

java.lang.NumberFormatException: For input string: "6002@16002"

若redis 的版本在4.0.0以上,建议利用jedis-2.9.0以上。

源码:

Redis 高可用集群

Redis 的集群主从模型是风流倜傥种高可用的集群架构。本章主要内容有:高可用集群的搭建,Jedis连接集群,新扩充集群节点,删除集群节点,其余布置补充表明。

剔除结点

除去节点前,要保管该节点未有值,不然提示:is not empty! Reshard data away and try again. 若该节点有值,则必要把槽分配出去

./redis-trib.rb del-node 112.74.83.71:6006 916d26e9638dc51e168f32969da11e19c875f48f 

本文由金沙澳门官网发布于数据库信息,转载请注明出处:高可用集群

关键词: 金沙澳门官网

上一篇:没有了
下一篇:没有了