詳解Mysql Proxy Lua讀寫(xiě)分離設(shè)置
Mysql Proxy Lua讀寫(xiě)分離設(shè)置是本文要介紹的內(nèi)容,主要是來(lái)了解Mysql Proxy的Mysql 分離設(shè)置,為了未來(lái)MySQL讀寫(xiě)分離的需要, 先行對(duì)MySQL官方的Mysql Proxy產(chǎn)品進(jìn)行了初步測(cè)試. 以下是測(cè)試過(guò)程,二進(jìn)制版Mysql Proxy可以去下載。
1、設(shè)置說(shuō)明
- Master服務(wù)器: 192.168.41.196
- Slave服務(wù)器: 192.168.41.197
- Proxy服務(wù)器: 192.168.41.203
2、安裝Mysql Proxy
在Proxy服務(wù)器上安裝即可. 如果源碼方式安裝, 需提前安裝pkg-config,libevent,glibc,lua等依賴(lài)包, 非常麻煩, 建議直接使用二進(jìn)制版.
- # cd /u01/software/mysql
- # tar -zxvf Mysql Proxy-0.8.1-linux-rhel5-x86-32bit.tar.gz -C /usr/local
- # cd /usr/local
- # ln -s Mysql Proxy-0.8.1-linux-rhel5-x86-32bit Mysql Proxy
- # vi + ~/.bash_profile
- export PATH=$PATH:/usr/local/Mysql Proxy/bin/
- # . ~/.bash_profile
3、Mysql Proxy選項(xiàng)說(shuō)明
- # Mysql Proxy help-all
管理功能選項(xiàng):
- admin-address=host:port 指定一個(gè)mysqo-proxy的管理端口, 缺省是4041;
- admin-username=<string> username to allow to log in
- admin-password=<string> password to allow to log in
- admin-lua-script=<filename> script to execute by the admin plugin
代理功能選項(xiàng):
- -P, proxy-address=<host:port> 是Mysql Proxy 服務(wù)器端的監(jiān)聽(tīng)端口, 缺省是4040;
- -r, proxy-read-only-backend-addresses=<host:port> 只讀Slave的地址和端口, 缺省為不設(shè)置;
- -b, proxy-backend-addresses=<host:port> 遠(yuǎn)程Master地址和端口, 可設(shè)置多個(gè)做failover和load balance, 缺省是127.0.0.1:3306;
- proxy-skip-profiling 關(guān)閉查詢(xún)分析功能, 缺省是打開(kāi)的;
- proxy-fix-bug-25371 修正 mysql的libmysql版本大于5.1.12的一個(gè)#25371號(hào)bug;
- -s, proxy-lua-script=<file> 指定一個(gè)Lua腳本來(lái)控制Mysql Proxy的運(yùn)行和設(shè)置, 這個(gè)腳本在每次新建連接和腳本發(fā)生修改的的時(shí)候?qū)⒅匦抡{(diào)用;
其他選項(xiàng):
- defaults-file=<file>配置文件, 可以把Mysql Proxy的參數(shù)信息置入一個(gè)配置文件里;
- daemon Mysql Proxy以守護(hù)進(jìn)程方式運(yùn)行
- pid-file=file 設(shè)置Mysql Proxy的存儲(chǔ)PID文件的路徑
- keepalive try to restart the proxy if it crashed, 保持連接啟動(dòng)進(jìn)程會(huì)有2個(gè), 一號(hào)進(jìn)程用來(lái)監(jiān)視二號(hào)進(jìn)程, 如果二號(hào)進(jìn)程死掉自動(dòng)重啟proxy.
4、數(shù)據(jù)庫(kù)準(zhǔn)備工作
(1)安裝半同步補(bǔ)丁(建議)
讀寫(xiě)分離不能回避的問(wèn)題之一就是延遲, 可以考慮Google提供的SemiSyncReplication補(bǔ)丁.
(2)給用戶(hù)授權(quán)
在Master/Slave建立一個(gè)測(cè)試用戶(hù), 因?yàn)橐院罂蛻?hù)端發(fā)送的SQL都是通過(guò)Mysql Proxy服務(wù)器來(lái)轉(zhuǎn)發(fā), 所以要確??梢詮腗ysql Proxy服務(wù)器上登錄MySQL主從庫(kù).
- mysql> grant all privileges on *.* to 'u_test'@'192.168.41.203' identified by 'xxx' with grant option;
(3)在Master建立測(cè)試表
- mysql> create table db_test.t_test (col varchar(10));
- mysql> insert into db_test.t_test values ('testA');
- mysql> select * from db_test.t_test;
- +-+
- | col |
- +-+
- | testA |
- +-+
5、Mysql Proxy啟動(dòng)
(1)修改讀寫(xiě)分離lua腳本
默認(rèn)最小4個(gè)***8個(gè)以上的客戶(hù)端連接才會(huì)實(shí)現(xiàn)讀寫(xiě)分離, 現(xiàn)改為最小1個(gè)***2個(gè):
- # vi +40 /usr/local/Mysql Proxy/share/doc/Mysql Proxy/rw-splitting.lua
- connection pool
- if not proxy.global.config.rwsplit then
- proxy.global.config.rwsplit = {
- min_idle_connections = 1,
- max_idle_connections = 2,
- is_debug = true
- }
- end
這是因?yàn)镸ysql Proxy會(huì)檢測(cè)客戶(hù)端連接, 當(dāng)連接沒(méi)有超過(guò)min_idle_connections預(yù)設(shè)值時(shí), 不會(huì)進(jìn)行讀寫(xiě)分離, 即查詢(xún)操作會(huì)發(fā)生到Master上.
(2)啟動(dòng)Mysql Proxy
建議使用配置文件的形式啟動(dòng), 注意配置文件必須是660權(quán)限, 否則無(wú)法啟動(dòng). 如果有多個(gè)Slave的話, proxy-read-only-backend-addresses參數(shù)可以配置多個(gè)以逗號(hào)分隔的IP:Port從庫(kù)列表.
- # killall Mysql Proxy
- # vi /etc/Mysql Proxy.cnf
- [Mysql Proxy]
- admin-username=wangnc
- admin-password=iamwangnc
- admin-lua-script=/usr/local/Mysql Proxy/lib/Mysql Proxy/lua/admin.lua
- proxy-backend-addresses=192.168.41.196:3351
- proxy-read-only-backend-addresses=192.168.41.197:3351
- proxy-lua-script=/usr/local/Mysql Proxy/share/doc/Mysql Proxy/rw-splitting.lua
- log-file=/var/tmp/Mysql Proxy.log
- log-level=debug
- daemon=true
- keepalive=true
- # chmod 660 /etc/Mysql Proxy.cnf
- # Mysql Proxy defaults-file=/etc/Mysql Proxy.cnf
- # ps -ef | grep Mysql Proxy | grep -v grep
- root 1869 1 0 18:16 ? 00:00:00 /usr/local/Mysql Proxy/libexec/Mysql Proxy defaults-file=/etc/Mysql Proxy.cnf
- root 1870 1869 0 18:16 ? 00:00:00 /usr/local/Mysql Proxy/libexec/Mysql Proxy defaults-file=/etc/Mysql Proxy.cnf
- # tail -50f /var/tmp/Mysql Proxy.log
6、客戶(hù)端連接測(cè)試
(1)先停止Slave的復(fù)制進(jìn)程
- mysql> stop slave;
(2)連接Proxy端口, 插入數(shù)據(jù)
- # mysql -uu_test -pxxx -h192.168.41.203 -P4040 -Ddb_test
- mysql> insert into db_test.t_test values ('testB');
- mysql> select * from db_test.t_test;
- +-+
- | col |
- +-+
- | testA |
- | testB |
- +-+
(3)多開(kāi)幾個(gè)客戶(hù)端, 連接Proxy端口, 查詢(xún)數(shù)據(jù)
- # mysql -uu_test -pxxx -h192.168.41.203 -P4040 -Ddb_test
- mysql> select * from db_test.t_test;
- +-+
- | col |
- +-+
- | testA |
- +-+
如果查詢(xún)不到上步新插入的數(shù)據(jù), 說(shuō)明連接到了Slave, 讀寫(xiě)分離成功. 在同一線程再插入數(shù)據(jù)并驗(yàn)證:
- mysql> insert into db_test.t_test values ('testC');
- mysql> select * from db_test.t_test;
- +-+
- | col |
- +-+
- | testA |
- +-+
發(fā)現(xiàn)insert操作成功, 但是select不出剛插入的數(shù)據(jù), 說(shuō)明同一線程也讀寫(xiě)分離成功. 從日志中可以驗(yàn)證:
- # tail -50f /var/tmp/Mysql Proxy.log
- ...
- [read_query] 192.168.41.203:45481
- current backend = 0
- client default db = db_test
- client username = u_test
- query = select * from db_test.t_test
- sending to backend : 192.168.41.197:3351
- is_slave : true
- server default db: db_test
- server username : u_test
- in_trans : false
- in_calc_found : false
- COM_QUERY : true
- [read_query] 192.168.41.203:45481
- current backend = 0
- client default db = db_test
- client username = u_test
- query = insert into db_test.t_test values ('testC')
- sending to backend : 192.168.41.196:3351
- is_slave : false
- server default db: db_test
- server username : u_test
- in_trans : false
- in_calc_found : false
- COM_QUERY : true
(4)測(cè)試完畢后, 啟動(dòng)Slave的復(fù)制進(jìn)程
- mysql> start slave;
7、正式環(huán)境說(shuō)明
1、Mysql Proxy當(dāng)前還只是個(gè)測(cè)試版, MySQL官方還不建議用到生產(chǎn)環(huán)境中;
2、Mysql Proxy的rw-splitting.lua腳本在網(wǎng)上有很多版本, 但是最準(zhǔn)確無(wú)誤的版本仍然是源碼包中所附帶的rw-splitting.lua腳本, 如果有lua腳本編程基礎(chǔ)的話, 可以在這個(gè)腳本的基礎(chǔ)上再進(jìn)行優(yōu)化;
3、Mysql Proxy實(shí)際上非常不穩(wěn)定, 在高并發(fā)或有錯(cuò)誤連接的情況下, 進(jìn)程很容易自動(dòng)關(guān)閉, 因此打開(kāi)keepalive參數(shù)讓進(jìn)程自動(dòng)恢復(fù)是個(gè)比較好的辦法, 但還是不能從根本上解決問(wèn)題, 因此通常最穩(wěn)妥的做法是在每個(gè)從服務(wù)器上安裝一個(gè)Mysql Proxy供自身使用, 雖然比較低效但卻能保證穩(wěn)定性;
4、Amoeba for MySQL是一款優(yōu)秀的中間件軟件, 同樣可以實(shí)現(xiàn)讀寫(xiě)分離, 負(fù)載均衡等功能, 并且穩(wěn)定性要大大超過(guò)Mysql Proxy, 建議大家用來(lái)替代Mysql Proxy, 甚至MySQL-Cluster.
小結(jié):詳解Mysql Proxy Lua讀寫(xiě)分離設(shè)置的內(nèi)容介紹完了,希望通過(guò)本文的學(xué)習(xí)能對(duì)你有所幫助!