2. 程式人生 > >redis原理及叢集主從配置

redis原理及叢集主從配置

阿新 • • 發佈：2019-06-12

一、簡介

　　儲存系統背景

　　　　儲存系統有三類：
　　　　RDBMS
　　　　　　oracle，dh2，postgresql，mysql，sql server
　　　　NoSQL:
　　　　　　KV NoSQL：redis,memcached
　　　　　　列式Column Family NoSQL: HBase，每一行每一欄位可以保留n份，也是按照欄位儲存
　　　　　　文件Documentation NoSQL: MongoDB
　　　　　　圖式Graph NoSQL: Neo4j

　　　　NewSQL
　　　　　　aerospike，foundationDB，rethinkDB...

　　1、什麼是redis

　　　　redis是一個開源的使用ANSI C 語言編寫、支援網路、可基於記憶體即可持久化的日誌型，key-value資料庫（是一個key-value儲存系統），支援多種語言的API

　　　　它是一個高階key-value資料庫，跟memcached類似，但是redis的資料可以持久化，並且支援資料型別更豐富，同時還支援服務端的計算集合的並、交、和補集等，支援多種排序功能。　　

　　　　　　

　　2、特點： 　　　　

　　　　常用來和memcache做比較，但redis是nosql，基於key-value（鍵值）的資料結構的儲存，可以儲存鍵值，字典，圖表

　　　　完全工作在記憶體中，資料儲存在記憶體，效能不錯，資料週期性備份到硬碟，(持久化)的單執行緒伺服器
　　　　可以通過lua指令碼擴充套件
　　　　支援sentinel主從架構高可用
　　　　分散式 　

　

　　3、效能

　　　　雖然是單執行緒，kv是一個單純簡單的儲存cpu通常不會形成瓶頸的，官方測試50個併發請求10w次，寫的速度是110000次/s，讀的速度是81000次/s，讀寫大小為256bytes的字串；　

 

　　4、持久化persistence

 

　　　　RDB: snapshot，二進位制格式；按事先定製的策略，週期性地將資料儲存至磁碟；資料檔案預設為dump.rdb;

　　　　　　客戶端也可顯式使用SAVA或BGSAVE命令啟動快照儲存機制；
　　　　　　SAVE: 同步，在主執行緒中儲存快照；此時會阻塞所有客戶端請求；
　　　　　　BGSAVE：非同步，
　　　　AOF：Append Only File
　　　　　　記錄每一次寫操作至指定的檔案尾部實現持久化；當redis重啟時，可通過重新執行檔案中的命令在記憶體重建資料庫；
　　　　　　BGREWRITEAOF：AOF檔案重寫；
　　　　　　不會讀取正在使用AOF檔案，而通過將記憶體中的資料以命令的方式儲存到臨時檔案中，完成之後替換原來的AOF檔案；

　　5、是一個數據結構伺服器它支援的value型別有：

 

　　　　String字串, List連結串列, Hash雜湊, Set集合, Sorted Set有序集合, Bitmap, HyperLoglog

　　　　

　　　　Strings:
　　　　　　SET key value [EX #] [NX|XX]
　　　　　　GET
　　　　　　INCR
　　　　　　DECR
　　　　　　EXIST

　　　　Lists:
　　　　　　LPUSH
　　　　　　RPUSH
　　　　　　LPOP
　　　　　　RPOP
　　　　　　LINDEX
　　　　　　LSET

　　　　Sets:
　　　　　　SADD
　　　　　　SINTER
　　　　　　SUNION
　　　　　　SPOP
　　　　　　SISMEMBER

　　　　Sorted Sets:
　　　　　　ZADD
　　　　　　ZRANGE
　　　　　　ZCARD
　　　　　　ZRANK

　　　　Hashes:
　　　　　　HSET
　　　　　　HSETNX
　　　　　　HGET
　　　　　　HKEYS
　　　　　　HVALS
　　　　　　HDEL

　　　　Bitmaps, HyperLogLog

 

　　6、守護程序

　　　　監聽埠為6379/tcp

　　7、資料庫對比

 

　　　　常見資料庫功能對比

名稱 資料庫型別 資料儲存選項 操作型別 備註
redis 記憶體儲存，nosql資料庫 支援字串、列表、集合、雜湊標、有序集合 增、刪、修改、更新 支援分散式儲存，主從同步及高可用，單執行緒
memcached 記憶體快取資料庫 鍵值之間得對映 增、刪、修改、更新 支援多執行緒
mysql 典型關係資料庫，RDBMS 資料庫由多表組成，每張表包含多行 增、刪、修改、更新 支援ACID性質
postgresql 典型關係資料庫，RDBMS 資料庫由多表組成，每張表包含多行 增、刪、修改、更新 支援ACID性質
mongodb 硬碟儲存，nosql資料庫 資料庫包含多個表 增、刪、修改、更新 主從複製，分片，副本集、空間索引

　　

 

　

 

 

 

 

 

　　

 

　　8、簡述和memcached之間的對比

　　　　redis不僅僅支援簡單的kv型別資料，還支援list，set，hash等資料結構

　　　　redis支援資料備份

　　　　redis支援資料持久化，可以將記憶體中的資料保持在磁碟中，重啟的時候可以在載入使用

　　　　叢集，memcache不支援叢集，多臺memcache 共處

　　9、redis的master/slave複製：

　　　　　　支援一個master多個slave

　　　　　　slave可以介紹其他slave的連結來替代他連結master

　　　　　　複製在master是非阻塞的，在slave是阻塞的

　　　　　　複製被利用來提供擴充套件性，在slave端只提供查詢功能及資料的冗餘

　　　　　

　　10、應用場景

　　　　快取（資料查詢，短連線、新聞內容、商品內容等）

　　　　分散式叢集架構中session分離

　　　　聊天室線上好友列表

　　　　任務佇列（秒殺、搶購、12306）

　　　　應用排行

　　　　網站訪問統計

　　　　資料統計

為了解決高併發、高可用、高可擴充套件，大資料儲存等一系列問題而產生的資料庫解決方案

 

 

 

二、主從複製工作機制

 　　redis持久化解決了redis服務重啟後能夠將硬碟的持久化資料恢復到記憶體中，但當redis伺服器硬碟壞掉就會導致資料丟失，為了避免這種單點故障就有了主從複製工作機制

　　一主多從結構

　　主從複製不會阻塞master，在同步資料時，master可以繼續處理client請求

　　一個redis即可以是主也可以是從

 

三、多例項redis配置

　　1、下載軟體及安裝源

　　　　http://download.redis.io/releases/redis-5.0.4.tar.gz

　　　　如果原始碼安裝下載原始碼

　　　　如果yum安裝請配置源

　　　　　　rpm -ivh http://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm

　　2、安裝有兩種安裝方式

　　　　1）、yum安裝

　　　　　　直接yum install redis

　　　　　　systemctl enable redis

　　　　　　systemctl start redis

 

Dependencies Resolved    #一些依賴

====================================================================================================================
 Package                    Arch                     Version                           Repository              Size
====================================================================================================================
Installing:
 redis                      x86_64                   3.2.12-2.el7                      epel                   544 k
Installing for dependencies:
 jemalloc                   x86_64                   3.6.0-1.el7                       epel                   105 k

Transaction Summary
====================================================================================================================
Install  1 Package (+1 Dependent package)




Complete!
[root@web1 ~]# systemctl start redis
[root@web1 ~]# systemctl enable redis
Created symlink from /etc/systemd/system/multi-user.target.wants/redis.service to /usr/lib/systemd/system/redis.service.

[root@web1 ~]# netstat -untlp
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      2570/redis-server 1 
tcp        0      0 0.0.0.0:111             0.0.0.0:*               LISTEN      1/systemd           
tcp        0      0 0.0.0.0:80              0.0.0.0:*               LISTEN      2050/nginx: master  
tcp        0      0 192.168.122.1:53        0.0.0.0:*               LISTEN      2176/dnsmasq        
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      875/sshd            
tcp        0      0 127.0.0.1:631           0.0.0.0:*               LISTEN      879/cupsd           
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      2035/master         
tcp6       0      0 :::111                  :::*                    LISTEN      1/systemd           
tcp6       0      0 :::80                   :::*                    LISTEN      2050/nginx: master  
tcp6       0      0 :::22                   :::*                    LISTEN      875/sshd            
tcp6       0      0 ::1:631                 :::*                    LISTEN      879/cupsd           
tcp6       0      0 ::1:25                  :::*                    LISTEN      2035/master         
udp        0      0 0.0.0.0:5353            0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 127.0.0.1:323           0.0.0.0:*                           2334/chronyd        
udp        0      0 0.0.0.0:52822           0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 192.168.122.1:53        0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:67              0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:177             0.0.0.0:*                           890/lightdm         
udp6       0      0 ::1:323                 :::*                                2334/chronyd        
udp6       0      0 :::177                  :::*                                890/lightdm         
[root@web1 ~]#

 

　　　　2）、編譯安裝

　　　　　　解壓-->編譯-->copy-->啟動

　　　　　

　　　這次編譯安裝一個新版本

　　　　　　mkdir /data

　　　　　　cd /data

　　　　　　#上傳下載的包到此目錄

　　　　　　　　redis-5.0.4.tar.gz

　　　　　　tar redis-5.0.4.tar.gz
　　　　　　cd rredis-5.0.4
　　　　　　make

 

　　3、編譯安裝及啟動

　　　　1）建立資料夾及拷貝關鍵檔案

　    mkdir /data/redis2

　　　cp redis.conf /data/redis2

　　　cp src/redis-server /data/redis2

　　　cd /data/redis2/

　　　　2）編輯配置檔案

　　　　　因為有#號開的行可以先過濾掉

　　　　　　sed -ri '/#|^$/d' redis.conf

　　　　　開始編輯配置檔案，修改下面幾項

　　　　　  vim redis.conf　　　

port 6380　　　　　　//監聽埠
appendonly no  yes //日誌開關，不是包報錯的日誌，是二進位制，記錄資料變化
pidfile /var/run/redis_6380.pid　　//pid名字
logfile "/data/redis2/redis.log" //log日誌
daemonize yes  //後臺啟動　　　
dbfilename dump.rbd　　//持久化資料檔案　　　　　

　　　　3）啟動

　　　　　　標紅的就是一個yum安裝的例項，一個編譯安裝的例項，這個就是多例項了

[root@web1 redis2]# ./redis-server ./redis.conf 
[root@web1 redis2]# netstat -tunlp
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      2570/redis-server 1 
tcp        0      0 192.168.216.51:6380     0.0.0.0:*               LISTEN      15434/./redis-serve 
tcp        0      0 0.0.0.0:111             0.0.0.0:*               LISTEN      1/systemd           
tcp        0      0 0.0.0.0:80              0.0.0.0:*               LISTEN      2050/nginx: master  
tcp        0      0 192.168.122.1:53        0.0.0.0:*               LISTEN      2176/dnsmasq        
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      875/sshd            
tcp        0      0 127.0.0.1:631           0.0.0.0:*               LISTEN      879/cupsd           
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      2035/master         
tcp6       0      0 :::111                  :::*                    LISTEN      1/systemd           
tcp6       0      0 :::80                   :::*                    LISTEN      2050/nginx: master  
tcp6       0      0 :::22                   :::*                    LISTEN      875/sshd            
tcp6       0      0 ::1:631                 :::*                    LISTEN      879/cupsd           
tcp6       0      0 ::1:25                  :::*                    LISTEN      2035/master         
udp        0      0 0.0.0.0:5353            0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 127.0.0.1:323           0.0.0.0:*                           2334/chronyd        
udp        0      0 0.0.0.0:52822           0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 192.168.122.1:53        0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:67              0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:177             0.0.0.0:*                           890/lightdm         
udp6       0      0 ::1:323                 :::*                                2334/chronyd        
udp6       0      0 :::177                  :::*                                890/lightdm         
[root@web1 redis2]#

 

 

 

　　　　4）變數，賦值取值，正常關閉，非正常的關閉

[root@web1 redis2]# redis-cli -h 192.168.216.51 -p 6380 
192.168.216.51:6380> 
192.168.216.51:6380> 
192.168.216.51:6380> 
192.168.216.51:6380> set home zxg  //賦值
OK192.168.216.51:6380> get home　　　　//取值
"zxg"
192.168.216.51:6380> get abc 123
(error) ERR wrong number of arguments for 'get' command
192.168.216.51:6380> set abc 123 
OK
192.168.216.51:6380> get abc
"123"192.168.216.51:6380> KEYS *　　　　//檢視所有的key
1) "abc"
2) "home"
192.168.216.51:6380> 
192.168.216.51:6380> SHUTDOWN　　//正常關閉，非正常關閉就是kill了

 

　　　

　　　　

四、主從配置

　　1、配置從伺服器

　　　redis主從配置非常簡單，只需要把從伺服器改一個配置即可

　　　vim redis.conf

 

slaveof 192.168.216.51 6379

　　2、啟動服務

[root@web2 ~]# systemctl start redis
[root@web2 ~]# systemctl enable redis

　　3、檢視主從狀態測試結果

[root@web1 redis2]# redis-cli -h 192.168.216.51 -p 6379
192.168.216.51:6379>  info replication 
# Replication
role:master
connected_slaves:1
slave0:ip=192.168.216.52,port=6379,state=online,offset=99,lag=0
master_repl_offset:99
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:2
repl_backlog_histlen:98
192.168.216.51:6379>

 

127.0.0.1:6379> info replication
# Replication
role:slave
master_host:192.168.216.51
master_port:6379
master_link_status:up
master_last_io_seconds_ago:3
master_sync_in_progress:0
slave_repl_offset:253
slave_priority:100
slave_read_only:1
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
127.0.0.1:6379>

注意1：從伺服器只讀

　　　　

　　　　master新建key test zxg

192.168.216.51:6379> set test zxg
OK
192.168.216.51:6379> get test
"zxg"
192.168.216.51:6379>

　　　　slave檢視有沒有值

127.0.0.1:6379> get test
"zxg"
127.0.0.1:6379>

 

 

轉載請註明出處：https://www.cnblogs.com/zhangxingeng/p/10743476.html 

 

相關推薦

redis原理及叢集主從配置

一、簡介 　　儲存系統背景 　　　　儲存系統有三類： 　　　　RDBMS 　　　　　　oracle，dh2，postgresql，mysql，sql server 　　　　NoSQL: 　　　　　　KV NoSQL：redis,memcached 　　　　　　列式Column Family

RocketMQ 安裝配置及叢集主從配置

1.       需要軟體：Maven，Java,RocketMQ當前最新版本是4.2.0，必須的java1.8來支援2 .  Java 安裝解壓完成後配置環境變數，#Java環境變數配置export JAVA_HOME=/usr/local/java/jdk1.8.0_17

Redis 原理及應用（3）--記憶體淘汰機制、主從同步原理，HA策略（哨兵機制）分析

非精準的LRU 上面提到的LRU（Least Recently Used）策略，實際上Redis實現的LRU並不是可靠的LRU，也就是名義上我們使用LRU演算法淘汰鍵，但是實際上被淘汰的鍵並不一定是真正的最久沒用的，這裡涉及到一個權衡的問題，如果需要在全部鍵空間內搜尋最優解，則必然會增加系統的開銷，Re

SpringMVC原理及非註解配置詳解

ges 控制器 sof 靈活 size 實現 query -c requests 1. Spring介紹 　　Spring MVC是Spring提供的一個強大而靈活的web框架。借助於註解，Spring MVC提供了幾乎是POJO的開發模式，使得控制器的開發和測試更加簡單

linux redis最新官方叢集安裝配置教程

Redis叢集介紹 Redis 叢集是一個提供在多個Redis間節點間共享資料的程式集。 Redis叢集並不支援處理多個keys的命令,因為這需要在不同的節點間移動資料,從而達不到像Redis那樣的效能,在高負載的情況下可能會導致不可預料的錯誤. Redis 叢集通過分割槽來提

Redis安裝及開機啟動配置

1、redis安裝流程：     第一步：下載redis安裝包     第二步：解壓壓縮包     第三步：yum安裝gcc依賴    yum install gcc  

redis原理及應用

redis原理及應用 一、redis來源 二、資料型別 三、主流的應用場景 四、特性 五、補充                          

Hadoop高可用原理及叢集的搭建

Hadoop High Availability HA(High Available), 高可用，是保證業務連續性的有效解決方案, 通常通過設定備用節點的方式實現; 一般分為執行業務的稱為活動節點(Active)，和作為活動節點的一個備份的備用節點(Standb

redis單機及叢集部署

Redis安裝部署 1、Redis單機部署 1.1、安裝步驟 步驟1： 到Redis官網(https://redis.io/download)下載Redis，現在最新的版本為：4.0.2，將下載好的壓縮包上傳到伺服器當中。目錄如下： 步驟2： 解壓包，執行如下指令：

Redis資料參考_主從配置一

Redis叢集（三）：主從配置一   一、本文目的          Redis的主從配置分為兩篇文章，第一篇主要介紹了Redis主從配置的搭建過程及使用，第二篇主要說明各種情況下Redis主從狀態，如Master掛掉，Slav

Linux之redis的安裝，主從配置

一，redis安裝 redis是一個key-value儲存系統。和Memcached類似，它支援儲存的value型別相對更多，包括string(字串)、list(連結串列)、set(集合)、zset(sorted set --有序集合)和hash（雜湊型別）。這些資料型別都支援push/pop、add/re

redis快取及叢集

一、持久化資料庫的缺點： 1、平常我們使用的關係型資料庫有Mysql、Oracle以及SqlServer等，在開發的過程中，資料庫通常都是通過web提供的資料庫驅動來連線資料庫進行curd操作。那麼我們 日常使用的資料庫的資料都儲存儲存在哪裡呢？ 以mysql為例子：開啟

Redis開發及叢集

Redis開發 中文網站：http://www.redis.net.cn/ 1.     Redis 簡介 REmote DIctionaryServer(Redis) 是一個由Salvatore Sanfilippo寫的key-value儲存系統。Red

redis學習之高階主從配置（四）

主從配置 一個master可以擁有多個slave，一個slave又可以擁有多個slave，如此下去，形成了強大的多級伺服器叢集架構 比如，將ip為192.168.1.10的機器作為主伺服器，將ip為

Redis原理及使用

1.原理介紹 （1）什麼是redis? Redis 是一個基於記憶體的高效能key-value資料庫。 (有空再補充，有理解錯誤或不足歡迎指正) （2）Reids的特點 Redis本質上是一個Key-Value型別的記憶體資料庫，很像memcached，整個資

Spring MVC內容協商實現原理及自定義配置【享學Spring MVC】

每篇一句 在絕對力量面前，一切技巧都是浮雲 前言 上文 介紹了Http內容協商的一些概念，以及Spring MVC內建的4種協商方式使用介紹。本文主要針對Spring MVC內容協商方式：從步驟、原理層面理解，最後達到通過自己來擴充套件協商方式效果。 首先肯定需要介紹的，那必然就是Spring MVC的預

redis單例、主從模式、sentinel以及叢集的配置方式及優缺點對比

redis作為一種高效的快取框架，使用是非常廣泛的，在資料儲存上，在執行時其將資料儲存在記憶體中，以實現資料的高效讀寫，並且根據定製的持久化規則不同，其會不定期的將資料持久化到硬碟中。另外相較於其他的NoSql資料庫，redis提供了非常豐富的資料結構，如dict，s

redis安裝及主從配置

redis；redis主從配置一、redis介紹 redis是一個key-value存儲系統。和Memcached類似，它支持存儲的value類型相對更多，包括string(字符串)、list(鏈表)、set(集合)和zset(有序集合)。這些數據類型都支持push/pop、add/remove及取交集並

redis配置文件詳解及實現主從同步切換

redis redis主從 redis配置文件詳解及實現主從同步切換redis復制Redis復制很簡單易用，它通過配置允許slave Redis Servers或者Master Servers的復制品。接下來有幾個關於redis復制的非常重要特性：一個Master可以有多個Slaves。Slaves能

高性能Mysql主從架構的復制原理及配置詳解

應用場景 難點 要點 一行 tar distrib 控制 成功 實時性 1 復制概述 Mysql內建的復制功能是構建大型，高性能應用程序的基礎。將Mysql的數據分布到多個系統上去，這種分布的機制，是通過將Mysql的某一臺主機的數據復制到其它主機（slaves