:いくつかの基本的なインストールと使用のRedisの前の概要、我々はここでRedisの記事のこのシリーズ見ることができますhttps://www.cnblogs.com/zhangweizhong/category/771056.htmlを。
Redisのは、クラスタリング機能、今日はそれについて作ります。それは時に次のバージョンの注目のRedisをダウンロードし、唯一のRedis 3.0クラスタ機能の後に、注意すべきです。
1. Redisのクラスタ原理
Redisのクラスタアーキテクチャ図を見てみましょう:
建築の詳細:
(1)ノードのすべてが相互接続され、Redisの(PING-PONG機構)、バイナリプロトコルと帯域幅の最適化を使用して、内部伝送速度。
失敗(2)ノードの半分を超えてノードクラスタが障害を検出したときに有効にすることです。
(3)Redisのクライアント・ノードが接続され、中間プロキシ層なしで、クライアントは、利用可能なノードに接続されたクラスタ内のすべてのクラスタノードに接続される必要はありません。
< - >スロット< - >値(4)Redisのクラスタマッピング、クラスタの[0から16383]スロット(スロットハッシュ)への物理的なノードのすべてのノードを維持します。
キー値は、最初の演算結果を使用してクラスタのRedis、RedisのにCRC16アルゴリズム鍵、および16384の残りの数の結果に置かれるときRedisのクラスタは、各キーこと、16384スロット(スロットハッシュ)を内蔵しました0から16383の間のハッシュのスロット番号に対応し、Redisのは、別のノードにハッシュスロットマップに従って、ノードの数にほぼ等しくなります。
Redisのクラスタ投票:フォールトトレランス
(1)マスタノードの半分以上は、現在のマスターノードがハングアップすることは、(クラスタノードタイムアウト)上マスターと通信する場合、投票プロセスは、クラスタに関与するすべてのマスターである主導。
(2):クラスタ全体が使用できない場合には(cluster_state:失敗)?
A:クラスタマスターは、任意ハング、及び現在のマスタ状態スレーブクラスタを入力するために失敗しない場合、クラスターは、スロットマッピング[0から16383]が完了していないときの状態を失敗に入ることが理解されるべきです。
B:クラスタマスターは関係なく、スレーブクラスタ状態に入るように失敗するかどうかの、半分以上がハングアップした場合。
注意:クラスタが使用できない場合1.、クラスタ上のすべての操作が使用不能にするために、受信((エラー)クラスタがあるCLUSTERDOWNダウン) エラー。
2. Redisの-3.0.0.rc1クラスタ互換性の部分的な障害を可能にする開いた構成を変更し、オフデフォルトで、クラスタ必要フルカバレッジパラメータを追加しました。
2.インストールのRedis
Redisのスタンドアロンインストールでは、ここでそれを繰り返さないで、ウェブ上の多くのチュートリアルがあり、およそ前に話をされました。
最後に、ソースのRedis 3.0、Redisのクラスタスクリプトおよびその他のリソースを提供します。私たちは、テストするバージョンを私に提供することができます。
3.ルビー環境をインストールします。
ルビー環境を頼るのRedis-trib.rbが付属していますredis3.0ソースクラスタ管理ツールでは、最初にルビー環境をインストールする必要があります。
1.ルビー環境をインストールします。
yumのルビーをインストール
yumをRubyGemsのインストール
2.ルビーとRedisのインタフェースプログラムをインストールします。
/ usr / localをコピーするためのRedis-3.0.0.gem
実行:宝石インストール/usr/local/redis-3.0.0.gem
4.クラスタを作成します。
クラスタノードの計画
次のように一般的なRedisのクラスタの例としては、それぞれ同じメインサーバ上の別のポートと異なるRedisのサーバーを表すプレゼンテーションの便宜のために、サーバーからインストールされます。
マスターノード:172.16.0.17:7001,172.16.0.17.3:7003:7002,172.16.0.17
ノードから:172.16.0.17:7004,172.16.0.17:7006:7005,172.16.0.17
以下のよう7001-7006、特定のディレクトリ:Redis06のRedisのインスタンスに6作成は/ usr / local Redisのクラスタディレクトリの下に作成された1のような、ポート番号をRedis01。
src 2. RedisのソースディレクトリのRedis-trib.rbの Redisのクラスタディレクトリをコピー。
3.各インスタンスRedisのプロファイルredis.confを変更します。
ポート7001 // ここでは、各実施例に対応するポートを変更、7001から7006は #bind 172.16。0.17 クラスタを -Enabledはい
各ノードRedisのサービスを開始
それぞれ、Redis01、Redis02に、... Redis06ディレクトリ、実行します。
./redis-server ./redis.conf
Redisの表示方法:PSの補助| grepをするのRedis
半年以上Redisのインスタンス、それが開始されています。
クラスタコマンドの実行を作成します。
実行Redisの-trib.rbは、このスクリプトは、それはルビーの環境に依存、Rubyスクリプトです。
./redis-trib.rb create --replicas 1 172.16.0.17:7001 172.16.0.17:7002 172.16.0.17:7003 172.16.0.17:7004 172.16.0.17:7005 172.16.0.17:7006
说明:
redis集群至少需要3个主节点,每个主节点有一个从节点总共6个节点
replicas指定为1表示每个主节点有一个从节点
注意:
如果执行时报如下错误:
[ERR] Node XXXXXX is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0
解决方法是删除生成的配置文件nodes.conf,如果不行则说明现在创建的结点包括了旧集群的结点信息,需要删除redis的持久化文件后再重启redis,比如:appendonly.aof、dump.rdb
创建集群输出如下:
>>> Creating cluster Connecting to node 172.16.0.17:7001: OK Connecting to node 172.16.0.17:7002: OK Connecting to node 172.16.0.17:7003: OK Connecting to node 172.16.0.17:7004: OK Connecting to node 172.16.0.17:7005: OK Connecting to node 172.16.0.17:7006: OK >>> Performing hash slots allocation on 6 nodes... Using 3 masters: 172.16.0.17:7001 172.16.0.17:7002 172.16.0.17:7003 Adding replica 172.16.0.17:7004 to 172.16.0.17:7001 Adding replica 172.16.0.17:7005 to 172.16.0.17:7002 Adding replica 172.16.0.17:7006 to 172.16.0.17:7003 M: cad9f7413ec6842c971dbcc2c48b4ca959eb5db4 172.16.0.17:7001 slots:0-5460 (5461 slots) master M: 4e7c2b02f0c4f4cfe306d6ad13e0cfee90bf5841 172.16.0.17:7002 slots:5461-10922 (5462 slots) master M: 1a8420896c3ff60b70c716e8480de8e50749ee65 172.16.0.17:7003 slots:10923-16383 (5461 slots) master S: 69d94b4963fd94f315fba2b9f12fae1278184fe8 172.16.0.17:7004 replicates cad9f7413ec6842c971dbcc2c48b4ca959eb5db4 S: d2421a820cc23e17a01b597866fd0f750b698ac5 172.16.0.17:7005 replicates 4e7c2b02f0c4f4cfe306d6ad13e0cfee90bf5841 S: 444e7bedbdfa40714ee55cd3086b8f0d5511fe54 172.16.0.17:7006 replicates 1a8420896c3ff60b70c716e8480de8e50749ee65 Can I set the above configuration? (type 'yes' to accept): yes >>> Nodes configuration updated >>> Assign a different config epoch to each node >>> Sending CLUSTER MEET messages to join the cluster Waiting for the cluster to join... >>> Performing Cluster Check (using node 172.16.0.17:7001) M: cad9f7413ec6842c971dbcc2c48b4ca959eb5db4 172.16.0.17:7001 slots:0-5460 (5461 slots) master M: 4e7c2b02f0c4f4cfe306d6ad13e0cfee90bf5841 172.16.0.17:7002 slots:5461-10922 (5462 slots) master M: 1a8420896c3ff60b70c716e8480de8e50749ee65 172.16.0.17:7003 slots:10923-16383 (5461 slots) master M: 69d94b4963fd94f315fba2b9f12fae1278184fe8 172.16.0.17:7004 slots: (0 slots) master replicates cad9f7413ec6842c971dbcc2c48b4ca959eb5db4 M: d2421a820cc23e17a01b597866fd0f750b698ac5 172.16.0.17:7005 slots: (0 slots) master replicates 4e7c2b02f0c4f4cfe306d6ad13e0cfee90bf5841 M: 444e7bedbdfa40714ee55cd3086b8f0d5511fe54 172.16.0.17:7006 slots: (0 slots) master replicates 1a8420896c3ff60b70c716e8480de8e50749ee65 [OK] All nodes agree about slots configuration. >>> Check for open slots... >>> Check slots coverage... [OK] All 16384 slots covered.
5. 查询集群信息
集群创建成功登陆任意redis结点查询集群中的节点情况。
客户端以集群方式登陆:
./redis-cli -c -h 172.16.0.17 -p 7001 -c //其中-c表示以集群方式连接redis,-h指定ip地址,-p指定端口号
查询集群信息
cluster nodes 查询集群结点信息
cluster info 查询集群状态信息
6. 添加主节点
集群创建成功后可以向集群中添加节点,下面是添加一个master主节点
1. 增加Redis07实例,参考集群结点规划章节添加一个“7007”目录作为新节点。
2. 将Redis07实例添加到集群中,执行下边命令:
./redis-trib.rb add-node 172.16.0.17:7007 172.16.0.17:7001
3. 查看集群结点发现7007已添加到集群中:
[root@VM_0_17_centos redis-cluster]# ./redis-trib.rb add-node 172.16.0.17:7007 172.16.0.17:7001 >>> Adding node 172.16.0.17:7007 to cluster 172.16.0.17:7001 Connecting to node 172.16.0.17:7001: OK .
.
.
Connecting to node 172.16.0.17:7003: OK Connecting to node 172.16.0.17:7005: OK Connecting to node 172.16.0.17:7002: OK Connecting to node 172.16.0.17:7006: OK Connecting to node 172.16.0.17:7004: OK >>> Performing Cluster Check (using node 172.16.0.17:7001) M: 977962f18ec51f363747961137dc903f0078b248 172.16.0.17:7001 slots:0-5460 (5461 slots) master 1 additional replica(s) M: defe4ce0421ee6b50bdab3da58754e98cc80fca3 172.16.0.17:7003 slots:10923-16383 (5461 slots) master 1 additional replica(s) S: a64fc273c0b90700397f5bac2b393dc5587d8ba8 172.16.0.17:7005 slots: (0 slots) slave replicates f277758189eba36c5b5732e9189d8554bf4385cb M: f277758189eba36c5b5732e9189d8554bf4385cb 172.16.0.17:7002 slots:5461-10922 (5462 slots) master 1 additional replica(s) S: 4f16e5adcc141ca284d4a9ec6d04f455aee84a48 172.16.0.17:7006 slots: (0 slots) slave replicates defe4ce0421ee6b50bdab3da58754e98cc80fca3 S: 479d5a077893184cd0b05a8e1b6cb5c0625215f4 172.16.0.17:7004 slots: (0 slots) slave replicates 977962f18ec51f363747961137dc903f0078b248 [OK] All nodes agree about slots configuration. >>> Check for open slots... >>> Check slots coverage... [OK] All 16384 slots covered. Connecting to node 172.16.0.17:7007: OK
.
.
. >>> Send CLUSTER MEET to node 172.16.0.17:7007 to make it join the cluster. [OK] New node added correctly.
哈希槽重新分配
添加完主节点后,集群并不会自动给新添加的节点分配哈希槽,需要我们手动对主节点进行hash槽分配重新分配,这样该主节才可以存储数据。
redis集群有16384个槽,集群中的每个结点分配自已槽,通过查看集群结点可以看到槽占用情况。可以看到刚才添加的主节点Redis07,没有分配哈希槽(slot)。
下面就来说说如何给刚添加的Redis01结点分配槽:
第一步:连接上集群
./redis-trib.rb reshard 172.16.0.17:7001 //(连接集群中任意一个可用结点都行)
第二步:输入要分配的槽数量
第三步:输入接收槽的结点id
这里准备给Redis07分配哈希槽,通过cluster nodes查看Redis07节点id为:e8461f9743e186ae8f67ed301d2d971186b1cc93
输入:e8461f9743e186ae8f67ed301d2d971186b1cc93,
第四步:输入源结点id
如果只是想从单个主节点获取哈希槽,那直接输入相应的节点id即可。
如果想从所有的主节点获取输入:all,
第五步:输入yes开始移动槽到目标结点id
第六步:分配完成之后,可以查询集群节点信息,查看哈希槽是否分配成功。
7. 添加从节点
集群创建成功后可以向集群中添加节点,下面是添加一个slave从节点的命令。
./redis-trib.rb add-node --slave --master-id 主节点id 添加节点的ip和端口 集群中已存在节点ip和端口
1. 添加Redis08实例为从结点,将Redis08作为Redis07的从结点。
执行如下命令:
./redis-trib.rb add-node --slave --master-id e8461f9743e186ae8f67ed301d2d971186b1cc93 172.16.0.17:7008 172.16.0.17:7001
e8461f9743e186ae8f67ed301d2d971186b1cc93 是Redis07实例的节点id,可通过cluster nodes查看。
注意:如果原来该结点在集群中的配置信息已经生成集群节点的配置文件(如果集群配置cluster-config-file默认指定则为nodes.conf),这时可能会报错:
[ERR] Node XXXXXX is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0
解决方法是:删除生成的配置文件nodes.conf,删除后再执行./redis-trib.rb add-node指令
2. 查看集群中的结点,刚添加的Redis08已经成为Redis07的从节点:
8. 删除结点:
集群创建成功后可以向集群中删除其中的一个节点,应该怎么删除呢?
执行如下命令即可:
./redis-trib.rb del-node 172.16.0.17 :7005 e8461f9743e186ae8f67ed301d2d971186b1cc93
注意:删除已经分配了有hash槽的节点会失败,报错如下:
[ERR] Node 172.16.0.17:7007 is not empty! Reshard data away and try again.
解决办法就是:将该结点占用的hash槽分配出去,请参考前面哈希槽重新分配的操作,这里就不重复了。
最后
以上就已经将如何搭建redis的集群讲完了。
redis3.0源码和ruby脚本,点击这里下载。