總結一下當前redis叢集的使用以及一些踩過的坑

以下資源來源於網際網路，綜合於多個blog文章，由鄙人總結，希望給新人一個正確的指導
1、新建一個叢集目錄
mkdir redis_cluser
2、新建6個資料夾
mkdir 7001
mkdir 7002
mkdir 7003
mkdir 7004
mkdir 7005
mkdir 7006
3、將配置檔案redis.conf分別拷貝進這6個資料夾（作為節點配置）
cp redis.conf /home/liupan/redis_cluser/7001
cp redis.conf /home/liupan/redis_cluser/7002
cp redis.conf /home/liupan/redis_cluser/7003
cp redis.conf /home/liupan/redis_cluser/7004
cp redis.conf /home/liupan/redis_cluser/7005
cp redis.conf /home/liupan/redis_cluser/7006
4、分別修改這6個配置檔案
修改內容如下：
port 7001  //六個節點配置檔案分別是7001-7006
daemonize yes        //redis後臺執行
pidfile /var/run/redis_7001.pid   //pidfile檔案對應7001-7006
cluster-enabled yes   //開啟叢集
cluster-config-file nodes_7001.conf  //儲存節點配置，自動建立，自動更新對應7001-7006
cluster-node-timeout 5000    //叢集超時時間，節點超過這個時間沒反應就斷定是宕機
appendonly yes   //儲存方式，aof，將寫操作記錄儲存到日誌中
備註：
注意不要配置requirepass屬性，如果配置了則也需要配置masterauth屬性並且修改client.rb中的password屬性，後面會詳細講解


5、啟動各個節點 並檢視啟動狀況

[email protected]:~/redis/redis/bin$ ./redis-server /home/liupan/redis_cluster/7001/redis.conf 
[email protected]:~/redis/redis/bin$ ./redis-server /home/liupan/redis_cluster/7002/redis.conf 
[email protected]:~/redis/redis/bin$ ./redis-server /home/liupan/redis_cluster/7003/redis.conf 
[email protected]:~/redis/redis/bin$ ./redis-server /home/liupan/redis_cluster/7004/redis.conf 

[email protected]:~/redis/redis/bin$ ./redis-server /home/liupan/redis_cluster/7005/redis.conf 
[email protected]:~/redis/redis/bin$ ./redis-server /home/liupan/redis_cluster/7006/redis.conf 


[email protected]:~/redis/redis/bin$ ps -ef|grep redis
liupan     6865      1  0 15:44 ?        00:00:09 ./redis-server 127.0.0.1:7005 [cluster]
liupan     6870      1  0 15:44 ?        00:00:09 ./redis-server 127.0.0.1:7006 [cluster]
liupan     6875      1  0 15:44 ?        00:00:08 ./redis-server 127.0.0.1:7004 [cluster]
liupan     6880      1  0 15:44 ?        00:00:09 ./redis-server 127.0.0.1:7003 [cluster]
liupan     6887      1  0 15:44 ?        00:00:09 ./redis-server 127.0.0.1:7002 [cluster]
liupan     6894      1  0 15:44 ?        00:00:08 ./redis-server 127.0.0.1:7001 [cluster]
liupan     7063   2277  0 19:18 pts/0    00:00:00 grep --color=auto redis

[email protected]:~/redis/redis/bin$ 


6、開啟叢集
由於redis叢集工具redis-trib.rb（安裝資料夾中可以找到）是ruby語言編寫的，所以需要安裝ruby編譯環境
sudo apt-get install ruby安裝ruby
sudo gem install redis安裝ruby-redis整合外掛
./redis-trib.rb create --replicas 1 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006 建立叢集
可能會遇到如下異常
ERR] Sorry, can't connect to node 127.0.0.1:7001
可能原因：
1）ruby版本過低（來源網路，未驗證）
2）配置檔案中bind 設定有問題（來源網路，未驗證），其實bind 屬性是針對多網絡卡計算機提供的，一般情況下127.0.0.1夠用，並不是大家理解的ip監控，實際應用中起不到客戶端過濾作用---來源網路
3）配置檔案中設定了requirepass，並且client.rb中沒有配置password，啟動叢集的時候，叢集工具由於沒有密碼，不能訪問節點，配置了password但沒有配置masterauth 也不行，啟動叢集的時候從伺服器沒有密碼，無法從主伺服器同步資料。由於主從伺服器的不固定性（選舉產生），所以masterauth要保持一致，requirepass也要保持一致，因為你要從叢集中的一個跳板機獲取整個叢集的資料，redis之間的通訊也依賴於一致的requirepass


7、配置redis叢集密碼
依次連線各個節點
./redis-cli -c -p 7001
config set masterauth passwd123 設定資料同步密碼，當叢集啟動時從節點會用該密碼從master主節點同步資料
config set requirepass passwd123 redis連線密碼
auth passwd123(主要是因為上一步設定了redis連線密碼，下面的rewrit命令需要驗證身份)
config rewrite 將命令設定的配置持久化到配置檔案中，具體可以開啟各個節點配置檔案觀察


8、配置了redis叢集密碼之後redis-trib.rb工具的各個命令都不會再起作用了，使用叢集工具訪問節點需要攜帶連線密碼，目前我不太清楚命令列是否可以攜帶密碼操作，故解決方案是把redis連線密碼配置到ruby環境的client.rb中
client.rb路徑
/var/lib/gems/2.3.0/gems/redis-4.0.1/lib/redis/client.rb
路徑不清楚的朋友可以用sudo find / -name 'client.rb'命令來查詢
[email protected]:~/redis/redis/bin$ sudo find / -name 'client.rb'
[sudo] liupan 的密碼： 
對不起，請重試。
[sudo] liupan 的密碼： 
find: ‘/run/user/1000/gvfs’: 許可權不夠
/var/lib/gems/2.3.0/gems/redis-4.0.1/lib/redis/client.rb
/usr/lib/ruby/2.3.0/xmlrpc/client.rb
注意查詢結果有兩個，你需要修改一個程式格式如下的client.rb


require_relative "errors"
require "socket"
require "cgi"


class Redis
  class Client


    DEFAULTS = {
      :url => lambda { ENV["REDIS_URL"] },
      :scheme => "redis",
      :host => "127.0.0.1",
      :port => 6379,
      :path => nil,
      :timeout => 5.0,
      :password => "passwd123",
      :db => 0,
      :driver => nil,
      :id => nil,
      :tcp_keepalive => 0,
      :reconnect_attempts => 1,
      :inherit_socket => false
    }


    attr_reader :options


    def scheme
      @options[:scheme]
    end


    def host
      @options[:host]
    end


    def port
      @options[:port]
    end


    def path
      @options[:path]
    end


    def read_timeout
      @options[:read_timeout]
    end


    def connect_timeout
      @options[:connect_timeout]
    end


    def timeout
      @options[:read_timeout]
    end


9、至此帶訪問控制的redis叢集部署成功


10、關閉redis叢集之後啟動節點再建立一次節點測試一些想法，又遇到一個坑爹的錯誤
[ERR] Node 127.0.0.1:7001 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0.
當然叢集是沒有問題的，在啟動節點之後整個叢集好像自己就啟動了，不需要控制，有空再研究一下吧
[email protected]:~/redis/redis/bin$ ./redis-cli -c -p 7001 -a passwd123
127.0.0.1:7001> lpush l1 111 222  333
-> Redirected to slot [10293] located at 127.0.0.1:7002
(integer) 3
127.0.0.1:7002> 


備註一下，在叢集跳板機上操作整個叢集需要-a加密碼，如果只是單獨連線一個節點在cli客戶端使用auth 命令登入，是無法將資料存到其他節點的哦，其實你可以理解為cli客戶端中的auth只是登入了該節點的redis