2. 程式人生 > >redis叢集搭建以及可能出現的問題

redis叢集搭建以及可能出現的問題

阿新 • • 發佈：2018-12-25

redis

redis下載安裝

cd tmp
mkdir frank
cd frank
mkdir redis
cd redis
wget http://download.redis.io/releases/redis-4.0.1.tar.gz
tar xzf redis-4.0.1.tar.gz
cd redis-4.0.1
make && make install

redis檢視，關閉,解除安裝

  1. 檢視
ps aux|grep redis
  1. 關閉
redis-cli shutdown 
or redis-cli -h 127.0.0.1 -p 6379 shutdown 
or
 
 kill -9 10654
  1. 解除安裝
rm -rf /usr/local/bin/redis*
rm -rf /tmp/frank/redis/redis-4.0.1

啟動redis服務

redis-server

啟動redis客戶端

redis-cli or redis-cli -h 127.0.0.1 -p 6379

ruby

安裝需要的Package

# yum -y install gcc

# yum -y install gcc-c++

# yum -y install zlib zlib-devel

# yum -y install readline readline-devel
 


# yum -y install openssl openssl-devel

最好是 #yum install gcc gcc-c++ openssl* readline* ncurses* zlib* libxml* libjpeg* libpng* libxslt* libtool*

ruby下載安裝

cd tmp
mkdir frank
cd frank
mkdir ruby
cd ruby
wget https://cache.ruby-lang.org/pub/ruby/2.4/ruby-2.4.2.tar.gz
tar xzf ruby-2.4.2.tar.gz
cd ruby-2.4
 
.2
./configure
make && make install

安裝redis介面,gem未ruby下的一個工具包

gem install redis

1.問題1

ERROR:  Loading command: install (LoadError)
    cannot load such file -- zlib
ERROR:  While executing gem ... (NoMethodError)
    undefined method `invoke_with_build_args' for nil:NilClass

解決 ：

# 進入ruby原始碼資料夾 
# 安裝ruby自身提供的zlib包 
cd ext/zlib
ruby ./extconf.rb
make
make install

搭建redis叢集

1。環境

redis 採用 redis-3.2.1 版本。

伺服器CentOS7.0 兩臺 （IP:116.196.65.198），（IP:47.52.41.245）

2。在兩臺伺服器上，下載安裝redis在tmp/frank/redis目錄下

cd /tmp
mkdir frank
cd frank
mkdir redis
wget http://download.redis.io/releases/redis-3.2.1.tar.gz
tar -zxvf redis-3.2.1.tar.gz　
cd redis-3.2.1
make && make install

3。將 redis安裝目錄下面的src目錄下面的redis-trib.rb 複製到 /usr/local/bin 目錄下

cd src
cp redis-trib.rb /usr/local/bin/

4。建立 Redis 節點

分別在兩臺伺服器上redis安裝目錄下建立 redis_cluster 目錄；

mkdir redis_cluster

在116.196.65.198伺服器上面的redis_cluster目錄下面建立名為7000、7001、7002的目錄，並將 redis.conf 拷貝到這三個目錄中

cd redis_cluster 
mkdir 7000 7001 7002
cd ..
cp redis.conf redis_cluster/7000
cp redis.conf redis_cluster/7001
cp redis.conf redis_cluster/7002　

分別修改這三個配置檔案，修改如下內容

port  7000                                        //埠7000,7002,7003    protected-mode no                               //關掉保護模式3.2之後 不然會報Sorry, can't connect to node
#bind 本機ip                                       //預設ip為127.0.0.1，在3.2之後要註釋掉 daemonize    yes                               //redis後臺執行
pidfile  /var/run/redis_7000.pid          //pidfile檔案對應7000,7001,7002
cluster-enabled  yes                           //開啟叢集  把註釋#去掉
cluster-config-file  nodes_7000.conf   //叢集的配置  配置檔案首次啟動自動生成 7000,7001,7002
cluster-node-timeout  15000                //請求超時  預設15秒，可自行設定
appendonly  yes                           //aof日誌開啟  有需要就開啟，它會每次寫操作都記錄一條日誌

接著在另外一臺機器上（47.52.41.245），的操作重複以上三步，只是把目錄改為7003、7004、7005，對應的配置檔案也按照這個規則修改即可

5。啟動各個節點

#第一臺機器上執行即116.196.65.198
redis-server redis_cluster/7000/redis.conf
redis-server redis_cluster/7001/redis.conf
redis-server redis_cluster/7002/redis.conf

#另外一臺機器上執行即47.52.41.245
redis-server redis_cluster/7003/redis.conf
redis-server redis_cluster/7004/redis.conf
redis-server redis_cluster/7005/redis.conf

6。檢查 redis 啟動情況

ps -ef | grep redis

root      2138     1  0 13:57 ?        00:00:01 redis-server *:7003 [cluster]
root      2142     1  0 13:57 ?        00:00:01 redis-server *:7004 [cluster]
root      2146     1  0 13:57 ?        00:00:01 redis-server *:7005 [cluster]
root      2185  2119  0 14:20 pts/0    00:00:00 grep --color=auto redis


netstat -tnlp | grep redis

tcp        0      0 0.0.0.0:17003           0.0.0.0:*               LISTEN      2138/redis-server * 
tcp        0      0 0.0.0.0:17004           0.0.0.0:*               LISTEN      2142/redis-server * 
tcp        0      0 0.0.0.0:17005           0.0.0.0:*               LISTEN      2146/redis-server * 
tcp        0      0 0.0.0.0:7003            0.0.0.0:*               LISTEN      2138/redis-server * 
tcp        0      0 0.0.0.0:7004            0.0.0.0:*               LISTEN      2142/redis-server * 
tcp        0      0 0.0.0.0:7005            0.0.0.0:*               LISTEN      2146/redis-server * 
tcp6       0      0 :::17003                :::*                    LISTEN      2138/redis-server * 
tcp6       0      0 :::17004                :::*                    LISTEN      2142/redis-server * 
tcp6       0      0 :::17005                :::*                    LISTEN      2146/redis-server * 
tcp6       0      0 :::7003                 :::*                    LISTEN      2138/redis-server * 
tcp6       0      0 :::7004                 :::*                    LISTEN      2142/redis-server * 
tcp6       0      0 :::7005                 :::*                    LISTEN      2146/redis-server *

7。建立叢集

Redis 官方提供了 redis-trib.rb 這個工具，就在解壓目錄的 src 目錄中，第三步中已將它複製到 /usr/local/bin 目錄中，可以直接在命令列中使用了。使用下面這個命令即可完成安裝

redis-trib.rb create --replicas 1 116.196.65.198:7000 116.196.65.198:7001 116.196.65.198:7002 47.52.41.245:7003 47.52.41.245:7004 47.52.41.245:7005

其中，前三個 ip:port 為第一臺機器的節點，剩下三個為第二臺機器。

這個工具是用 ruby 實現的，所以需要安裝 ruby。安裝命令如下：

yum -y install ruby ruby-devel rubygems rpm-build

gem install redis

或者按上面的流程安裝ruby

之後再執行 redis-trib.rb 命令，會出現如下提示：

redis-trib.rb create --replicas 1 116.196.65.198:7000 116.196.65.198:7001 116.196.65.198:7002 47.52.41.245:7003 47.52.41.245:7004 47.52.41.245:7005

###出現下面這些代表成功

>>> Creating cluster
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
116.196.65.198:7000
47.52.41.245:7003
116.196.65.198:7001
Adding replica 47.52.41.245:7004 to 116.196.65.198:7000
Adding replica 116.196.65.198:7002 to 47.52.41.245:7003
Adding replica 47.52.41.245:7005 to 116.196.65.198:7001
M: 33d50636b5235de9970de2da75901b642d2b14d2 116.196.65.198:7000
   slots:0-5460 (5461 slots) master
M: 668397aba571ece85532b1eb1fccb42e4e33b1f2 116.196.65.198:7001
   slots:10923-16383 (5461 slots) master
S: 908430b2bf63669898e9eaef79dd6c1b33c8c57a 116.196.65.198:7002
   replicates cc86a24f3896ad7530e2687cf52582912f74b661
M: cc86a24f3896ad7530e2687cf52582912f74b661 47.52.41.245:7003
   slots:5461-10922 (5462 slots) master
S: 3a0b27e2e34e72430ce41bb78f6d207579175306 47.52.41.245:7004
   replicates 33d50636b5235de9970de2da75901b642d2b14d2
S: ca60de73e15c19a9aa45da508d270a5781a76724 47.52.41.245:7005
   replicates 668397aba571ece85532b1eb1fccb42e4e33b1f2
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join......
>>> Performing Cluster Check (using node 116.196.65.198:7000)
M: 33d50636b5235de9970de2da75901b642d2b14d2 116.196.65.198:7000
   slots:0-5460 (5461 slots) master
M: 668397aba571ece85532b1eb1fccb42e4e33b1f2 116.196.65.198:7001
   slots:10923-16383 (5461 slots) master
M: 908430b2bf63669898e9eaef79dd6c1b33c8c57a 116.196.65.198:7002
   slots: (0 slots) master
   replicates cc86a24f3896ad7530e2687cf52582912f74b661
M: cc86a24f3896ad7530e2687cf52582912f74b661 47.52.41.245:7003
   slots:5461-10922 (5462 slots) master
M: 3a0b27e2e34e72430ce41bb78f6d207579175306 47.52.41.245:7004
   slots: (0 slots) master
   replicates 33d50636b5235de9970de2da75901b642d2b14d2
M: ca60de73e15c19a9aa45da508d270a5781a76724 47.52.41.245:7005
   slots: (0 slots) master
   replicates 668397aba571ece85532b1eb1fccb42e4e33b1f2
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

8。叢集驗證
在第一臺機器上連線叢集的7002埠的節點，在另外一臺連線7005節點，連線方式為 redis-cli -h 116.196.65.198 -c -p 7002 ,加引數 -C 可連線到叢集，因為上面 redis.conf 將 bind 改為了ip地址，所以 -h 引數不可以省略。

####連結116.196.65.198:7002存入 鍵jiqun 值chenggong
[[email protected] redis-3.2.1]# redis-cli -h 116.196.65.198 -c -p 7002
116.196.65.198:7002> set jiqun chenggong
-> Redirected to slot [8235] located at 47.52.41.245:7003
OK
47.52.41.245:7003> 

####連結47.52.41.245:700取出 鍵jiqun 的值
[[email protected] redis-3.2.1]# redis-cli -h 47.52.41.245 -c -p 7005
47.52.41.245:7005> get jiqun
-> Redirected to slot [8235] located at 47.52.41.245:7003
"chenggong"
47.52.41.245:7003>

9。可能出現問題

  • Sorry, can’t connect to node

解決方案：

首先檢查伺服器埠是否開發，阿里，京東等伺服器需要在安全組裡面開發
埠，直接在伺服器裡面用命令開發埠是無效的。其次在redis.config配置檔案裡面關閉保護模式和註釋掉bin

  • [ERR] Node 172.168.63.202:7001 is not empty. Either the nodealready knows other nodes (check with CLUSTER NODES) or contains some
    解決方案：

1)、將需要新增的節點下aof、rdb等本地備份檔案刪除；

2)、同時將新Node的叢集配置檔案刪除,即：刪除你redis.conf裡面cluster-config-file所在的檔案；

3)、再次新增新節點如果還是報錯，則登入新Node,./redis-cli –h x –p對資料庫進行清除：

116.196.65.198:7000> flushdb #清空當前資料庫

4)，重啟伺服器，或者重啟redis

  • Waiting for the cluster to join 一直等待

解決方案：

1、伺服器的防火牆是否允許叢集匯流排埠通過

redis叢集不僅需要開通redis客戶端連線的埠，而且需要開通叢集匯流排埠，叢集匯流排埠為redis客戶端連線的埠 + 10000

　如上面用到redis埠為6379，7000,7001,7002,7003,7004,7005，則叢集匯流排埠為16379，17000,17001,17002,17003,17004,17005，故，所有伺服器的點需要開通redis的客戶端連線埠和叢集匯流排埠。如果伺服器有安全組安全組也要開通，沒有隻要開通伺服器本身的

##centos7.3伺服器
systemctl status firewalld.service #防火牆狀態
systemctl start firewalld.service   #防火牆開啟
systemctl disable firewalld.service #防火牆不可用

firewall-cmd --zone=public --add-port=80/tcp --permanent #開啟埠

命令含義：

--zone #作用域

--add-port=80/tcp  #新增埠，格式為：埠/通訊協議

--permanent  #永久生效，沒有此引數重啟後失效

重啟防火牆

firewall-cmd --reload

相關推薦

redis叢集搭建以及可能出現的問題

redis redis下載安裝 cd tmp mkdir frank cd frank mkdir redis cd redis wget http://download.redis.io/releases/redis-4.0.1.tar.gz tar xz

千萬級使用者Redis快取叢集搭建以及專案實戰

Redis單機版搭建 3.1安裝redis ?版本說明 本教程使用redis3.0版本。3.0版本主要增加了redis叢集功能。 安裝的前提條件： 需要安裝 gcc：yum install gcc-c++ 1、下載redis的原始碼包。 2

關於Ble通信庫BluetoothKit的使用 以及可能出現的問題分析

界面 能夠 才有 admin bluetooth 動態 低功耗 超時 cto 　　首先，這個庫是用於BLE（低功耗藍牙）通信的，地址：https://github.com/dingjikerbo/BluetoothKit 當然，也可以選擇根據andor

spring-sparkstreaming-kafka10整合實現以及可能出現的部分問題（DirectKafkaInputDStream 無法序列化）

本文所研究的spark-streaming程式碼版本為2.3.0-SNAPSHOT  spark-streaming為了匹配0.10以後版本的kafka客戶端變化推出了一個目前還是Experimental狀態的spark-streaming-kafka-0-10客戶端，由於老的0

Redis 叢集搭建簡述

環境 作業系統：CentOS 7.3 redis版本：Redis 3.2.8 兩臺主機，每臺主機上3個節點 基本步驟 下載解壓安裝包 # 下載解壓安裝包 wget http://download.redis.io/releases/redis-3.2.8.tar.gz

搭建redis叢集 Linux環境redis叢集搭建

Linux環境redis叢集搭建 集群后tomcat context.xml的配置 <!-- 叢集配置--> <Valve className="com.radiadesign.catalina.session.RedisSessionHandlerValve"

Redis叢集搭建與維護

一、概述     Redis3.0版本之後支援Cluster. 二、redis cluster安裝     1、下載和解包 cd /usr/local/ wget http://download.redis.io/releases/re

Hadoop叢集搭建以及遇到問題詳解

轉載：http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/ centos7單機、分散式、偽分佈：https://blog.csdn.net/qq_40938267/article/details/83416665  有詳細的搭建過程

Window7下Redis叢集搭建

在Windows系統下搭建Redis叢集：     需要4個部件： 　　　　Redis、Ruby語言執行環境、Redis的Ruby驅動redis-xxxx.gem、建立Redis叢集的工具redis-trib.rb      安裝Redis，並執行3個例

【Redis學習】--Redis叢集搭建

文章目錄 1. Redis部署 1.1 安裝依賴環境 1.2 安裝 Redis 1.3 啟動Redis 前臺啟動： 後臺啟動： 1.4 測試客戶端可用情況：

redis叢集介紹、redis叢集搭建配置、redis叢集操作

一：redis叢集介紹 多個redis節點網路互聯，資料共享所有的節點都是一主一從（可以是多個從），其中從不提供服務，僅作為備用不支援同時處理多個鍵（如mset/mget），因為redis需要把鍵均勻分佈在各個節點上，併發量很高的情況下同時建立鍵值會降低效能並導致不可預測的行為。支援線上增加、刪除節點客戶端

多主機 Redis 叢集搭建

1、Redis安裝包 連結：https://pan.baidu.com/s/1VPm2RZFohhL3xLhCzfgBUg 密碼：qfn5 叢集環境: 192.168.195.129    7001、7002埠 192.168.195.128  &nbs

redis叢集搭建

Redis叢集 基本介紹 Redis 叢集是一個可以在多個 Redis 節點之間進行資料共享的設施installation。 Redis 叢集不支援那些需要同時處理多個鍵的 Redis 命令， 因為執行這些命令需要在多個 Redis 節點之間移動資料， 並且在高負載的情

Redis 叢集搭建詳細指南

Redis 叢集簡介 Redis 是一個開源的 key-value 儲存系統，由於出眾的效能，大部分網際網路企業都用來做伺服器端快取。Redis 在3.0版本前只支援單例項模式，雖然支援主從模式、哨兵模式部署來解決單點故障，但是現在網際網路企業動輒大幾百G的資料，可完全是沒

redis叢集搭建（非常詳細，適合新手）

redis叢集搭建 在開始redis叢集搭建之前，我們先簡單回顧一下redis單機版的搭建過程 下載redis壓縮包，然後解壓壓縮檔案； 進入到解壓縮後的redis檔案目錄（此時可以看到Makefile檔案），編譯redis原始檔； 把編譯好的redis原始檔

redis叢集搭建及問題的決方法（一）

一、叢集搭建主要配置如下： P61 bind 127.0.0.1//預設ip為127.0.0.1改為其他節點機器可訪問 的ip 註釋掉bind;可以監聽連線當前服務的所有-h 後的ip;例如;綁定了 127.0.0.1,但是登入時使用-h 10.9.17.153

redis叢集搭建及問題的決方法（二）

一、準備好有三個主節點的叢集 127.0.0.1:8000> cluster nodes 8ce851252f32fcab268e77d3b3ed976d57d2f498 10.211.55.5:8000 myself,master - 0 0 1 con

Redis叢集搭建詳細指南

Redis 叢集簡介 Redis 是一個開源的 key-value 儲存系統，由於出眾的效能，大部分網際網路企業都用來做伺服器端快取。Redis 在3.0版本前只支援單例項模式，雖然支援主從模式、哨兵模式部署來解決單點故障，但是現在網際網路企業動輒大幾百G的資料，可完全

深入學習Redis叢集搭建方案及實現原理

本文將詳細介紹叢集，主要內容包括： 叢集的作用 叢集的搭建方法及設計方案 叢集的基本原理 客戶端訪問叢集的方法 實踐須知（叢集伸縮、故障轉移、引數優化等） 叢集的作用 叢集，即 Redis Cluster，是 Redis

【Redis】Redis叢集搭建...爬坑日記

文章目錄前言準備爬坑準備踩過的坑爬坑日誌總結 前言 說好的更新大資料… 抱歉，加班去搞了個redis叢集… 我把搞redis踩的坑都給你們說一下… BigData 和 微服務 後續更新 小編昨晚搞到晚上