MySQL Proxy 實現 MySQL 讀寫分離提高併發負載
工作拓撲:
MySQL Proxy有一項強大功能是實現“讀寫分離”,基本原理是讓主資料庫處理寫方面事務,讓從庫處理SELECT查詢。
Amoeba for MySQL是一款優秀的中介軟體軟體,同樣可以實現讀寫分離,負載均衡等功能,並且穩定性也高於MySQL Proxy,有興趣的可以測試一下。
環境描述:
- 作業系統:CentOS6.3_x64
- 主伺服器Master:192.168.0.202
- 從伺服器Slave:192.168.0.203
- 排程伺服器MySQL-Proxy:192.168.0.204
一、mysql主從複製
工作原理圖:
主從複製的原理:
分為同步複製和非同步複製,實際複製架構中大部分為非同步複製。 複製的基本過程如下:
1).Slave上面的IO程序連線上Master,並請求從指定日誌檔案的指定位置(或者從最開始的日誌)之後的日誌內容;
2).Master接收到來自Slave的IO程序的請求後,通過負責複製的IO程序根據請求資訊讀取制定日誌指定位置之後的日誌資訊,返回給Slave 的IO程序。返回資訊中除了日誌所包含的資訊之外,還包括本次返回的資訊已經到Master端的bin-log檔案的名稱以及bin-log的位置;
3).Slave的IO程序接收到資訊後,將接收到的日誌內容依次新增到Slave端的relay-log檔案的最末端,並將讀取到的Master端的 bin-log的檔名和位置記錄到master-info檔案中,以便在下一次讀取的時候能夠清楚的告訴Master“我需要從某個bin-log的哪個位置開始往後的日誌內容,請發給我”;
4).Slave的Sql程序檢測到relay-log中新增加了內容後,會馬上解析relay-log的內容成為在Master端真實執行時候的那些可執行的內容,並在自身執行。
環境描述
- 作業系統:CentOS6.3_x64
- 主伺服器master:192.168.0.202
- 從伺服器slave:192.168.0.203
一、mysql主從複製
1、主從安裝mysql,版本一致
我們裝的是 mysql-5.5.30.tar.gz 這裡省略…
2、修改master,slave伺服器
1 2 3 4 5 6 7 8 9 10 11 12 13 |
master伺服器配置: vi /usr/local/mysql/etc/my.cnf [mysqld] server-id=202 #設定伺服器唯一的id,預設是1,我們設定ip最後一段,slave設定203 log-bin=mysql-bin # 啟用二進位制日誌 binlog-ignore-db = mysql,information_schema #忽略寫入binlog的庫 slave伺服器配置: vi /usr/local/mysql/etc/my.cnf [mysqld] server-id=203 replicate-do-db = abc #只同步abc庫 slave-skip-errors = all #忽略因複製出現的所有錯誤 |
3、重啟主從伺服器mysql
1 |
/etc/init.d/mysqld restart |
4、在主伺服器上建立帳戶並授權slave
1 2 |
mysql> mysql -u root -p123.com mysql> GRANT REPLICATION SLAVE ON *.* to ‘sync’@‘192.168.1.2’ identified by ‘1234.com’; #replication:複製 |
5、檢視主資料庫狀態
1 2 3 4 5 6 |
mysql> show master status; +------------------+----------+--------------+------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +------------------+----------+--------------+------------------+ | mysql-bin.000002 | 263 | | | +------------------+----------+--------------+------------------+ |
6、配置從資料庫
1 2 3 4 5 6 7 |
mysql> change master to -> master_host='192.168.0.202', -> master_user='sync', -> master_password='1234.com', -> master_log_file='mysql-bin.000002', -> master_log_pos=263; #Log和pos是master上隨機獲取的。這段也可以寫到my.cnf裡面。 |
7、啟動slave同步程序並檢視狀態
1 |
mysql> start slave; |
其中Slave_IO_Running 與 Slave_SQL_Running 的值都必須為YES,才表明狀態正常。
8、驗證主從同步
在主mysql建立資料庫abc,再從mysql檢視已經同步成功!
1 2 3 4 5 6 7 8 9 10 11 |
mysql> create database abc; mysql> show databases; +--------------------+ | Database | +--------------------+ | information_schema | | abc | | mysql | | performance_schema | | test | +--------------------+ |
在slave啟動報錯:
“Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: ‘Could not find first log file name in binary log index file’”
解決:報錯的原因主要是slave設定master的二進位制檔名或pos值不對應!
先flush logs;清空日誌,在檢視下主資料庫的狀態 show master status;看下日誌檔名字和position值;
再在slave中,執行:CHANGE MASTER TO MASTER_LOG_FILE=‘二進位制日誌名’,MASTER_LOG_POS=值;
最後啟動同步程序:start slave;
二、mysql-proxy實現讀寫分離
1、安裝mysql-proxy
實現讀寫分離是有lua指令碼實現的,現在mysql-proxy裡面已經整合,無需再安裝
1 2 |
tar zxvf mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz mv mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy |
2、配置mysql-proxy,建立主配置檔案
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 |
cd /usr/local/mysql-proxy mkdir lua #建立指令碼存放目錄 mkdir logs #建立日誌目錄 cp share/doc/mysql-proxy/rw-splitting.lua ./lua #複製讀寫分離配置檔案 cp share/doc/mysql-proxy/admin-sql.lua ./lua #複製管理指令碼 vi /etc/mysql-proxy.cnf #建立配置檔案 [mysql-proxy] user=root #執行mysql-proxy使用者 admin-username=proxy #主從mysql共有的使用者 admin-password=123.com #使用者的密碼 proxy-address=192.168.0.204:4000 #mysql-proxy執行ip和埠,不加埠,預設4040 proxy-read-only-backend-addresses=192.168.0.203 #指定後端從slave讀取資料 proxy-backend-addresses=192.168.0.202 #指定後端主master寫入資料 proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua #指定讀寫分離配置檔案位置 admin-lua-script=/usr/local/mysql-proxy/lua/admin-sql.lua #指定管理指令碼 log-file=/usr/local/mysql-proxy/logs/mysql-proxy.log #日誌位置 log-level=info #定義log日誌級別,由高到低分別有(error|warning|info|message|debug) daemon=true #以守護程序方式執行 keepalive=true #mysql-proxy崩潰時,嘗試重啟 儲存退出! chmod 660 /etc/mysql-porxy.cnf |
3、修改讀寫分離配置檔案
1 2 3 4 5 6 7 8 |
vi /usr/local/mysql-proxy/lua/rw-splitting.lua if not proxy.global.config.rwsplit then proxy.global.config.rwsplit = { min_idle_connections = 1, #預設超過4個連線數時,才開始讀寫分離,改為1 max_idle_connections = 1, #預設8,改為1 is_debug = false } end |
4、啟動mysql-proxy
1 2 3 4 |
/usr/local/mysql-proxy/bin/mysql-proxy --defaults-file=/etc/mysql-proxy.cnf netstat -tupln | grep 4000 #已經啟動 tcp 0 0 192.168.0.204:4000 0.0.0.0:* LISTEN 1264/mysql-proxy 關閉mysql-proxy使用:killall -9 mysql-proxy |
5、測試讀寫分離
1>.在主伺服器建立proxy使用者用於mysql-proxy使用,從伺服器也會同步這個操作
1 |
mysql> grant all on *.* to 'proxy'@'192.168.0.204' identified by '123.com'; |
2>.使用客戶端連線mysql-proxy
1 |
mysql -u proxy -h 192.168.0.204 -P 4000 -p123.com |
建立資料庫和表,這時的資料只寫入主mysql,然後再同步從slave,可以先把slave的關了,看能不能寫入,這裡我就不測試了,下面測試下讀的資料!
1 2 3 |
mysql> create table user (number INT(10),name VARCHAR(255)); mysql> insert into test values(01,'zhangsan'); mysql> insert into user values(02,'lisi'); |
3>.登陸主從mysq檢視新寫入的資料如下,
1 2 3 4 5 6 7 8 9 |
mysql> use test; Database changed mysql> select * from user; +--------+----------+ | number | name | +--------+----------+ | 1 | zhangsan | | 2 | lisi | +--------+----------+ |
4>.再登陸到mysql-proxy,查詢資料,看出能正常查詢
1 2 3 4 5 6 7 8 9 |
mysql -u proxy -h 192.168.0.204 -P 4000 -p123.com mysql> use test; mysql> select * from user; +--------+----------+ | number | name | +--------+----------+ | 1 | zhangsan | | 2 | lisi | +--------+----------+ |
5>.登陸從伺服器關閉mysql同步程序,這時再登陸mysql-proxy肯定會查詢不出資料
1 |
slave stop; |
6>.登陸mysql-proxy查詢資料,下面看來,能看到表,查詢不出資料
1 2 3 4 5 6 7 8 9 10 |
mysql> use test; Database changed mysql> show tables; +----------------+ | Tables_in_test | +----------------+ | user | +----------------+ mysql> select * from user; ERROR 1146 (42S02): Table 'test.user' doesn't exist |
配置成功!真正實現了讀寫分離的效果!
來源http://www.cnblogs.com/luckcs/articles/2543607.html