自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

淺談使用MySQL Proxy Lua讀寫分離時注意事項(xiàng)

移動開發(fā) iOS
使用MySQL-Proxy讀寫分離時注意事項(xiàng)是本文要介紹的內(nèi)容,在動手操作前最好先安裝好MySQL-Proxy,并配置好MySQL主從服務(wù)器,來看詳細(xì)內(nèi)容。

使用MySQL Proxy讀寫分離時注意事項(xiàng)是本文要介紹的內(nèi)容,在動手操作前最好先安裝好MySQL-Proxy,并配置好MySQL主從服務(wù)器。補(bǔ)充:新版MySQL已經(jīng)內(nèi)建支持

延遲問題

讀寫分離不能回避的問題之一就是延遲,可以考慮Google提供的SemiSyncReplicationDesign補(bǔ)丁。

端口問題

MySQL-Proxy缺省使用的是4040端口,如果你想透明的把3306端口的請求轉(zhuǎn)發(fā)給4040的話,那么可以:

  1. iptables -t nat -I PREROUTING -s ! 127.0.0.1 -p tcp --dport 3306 -j REDIRECT --to-ports 4040 

如果想刪除這條規(guī)則,可以把上面例子中的-I換成-D。

密碼加密方式

MySQL-Proxy不支持老的密碼加密方式,所以如果你使用的是老版本的MySQL,或者啟用了old_passwords選項(xiàng)的話,則可能會出現(xiàn)錯誤:

  1. ERROR 2013: Lost connection to MySQL server 

此時最好的修復(fù)方法就是使用新的密碼加密方式,如果你的用戶表是老式的,可能需要先運(yùn)行MySQL源代碼里scripts目錄下的mysql_fix_privilege_tables腳本升級表結(jié)構(gòu)。有時候客觀情況可能不允許立刻進(jìn)行升級操作,此時可以為MySQL-Proxy專門建立一個密碼為空的用戶(通過主機(jī)限制訪問,或者起一個很復(fù)雜的用戶名),因?yàn)椴还苁切碌拿艽a加密方式還是舊的密碼加密方式,空密碼都同樣是一個空字符串,這樣就規(guī)避了密碼加密的問題。

查詢亂碼

連接上MySQL-Proxy后,執(zhí)行查詢時,隨機(jī)出現(xiàn)亂碼。出現(xiàn)此問題的原因是當(dāng)我們使用MySQL-Proxy讀寫分離時,通常會有多個后端服務(wù)器,客戶端發(fā)出查詢請求時,一般會先發(fā)出一條類似"SET NAME gbk"的語句來聲明客戶端編碼,然后再發(fā)出實(shí)際查詢的SQL語句,但MySQL-Proxy可能會把這兩條語句分發(fā)給不同的后端服務(wù)器,于是就出現(xiàn)了亂碼。

解決方法是強(qiáng)行指定后端服務(wù)器的字符編碼:

  1. init-connect='SET NAME gbk' 
  2.  
  3. default-character-set=gbk 
  4. skip-character-set-client-handshake 

如果使用init-connect,則需要注意操作用戶不能有SUPER權(quán)限,否則此選項(xiàng)無效。

即便做好了以上的設(shè)置后,還有可能會出現(xiàn)亂碼,比如說數(shù)據(jù)庫是gbk的,當(dāng)我們用PHPMyAdmin連接MySQL-Proxy時,查詢還是會出現(xiàn)亂碼,不過這是正常的!因?yàn)镻HPMyAdmin使用的是utf8編碼,它發(fā)出的“SET NAMES utf8”語句被skip-character-set-client-handshake屏蔽了,所以出現(xiàn)亂碼。

進(jìn)程崩潰

MySQL-Proxy偶爾會出現(xiàn)進(jìn)程崩潰的情況,具體原因不明。

新版的MySQL-Proxy為了應(yīng)付這個問題加入了一個keepalive選項(xiàng)(try to restart the proxy if it crashed),當(dāng)使用這個選項(xiàng)時,會先后啟動兩個mysql-proxy進(jìn)程,先啟動的mysql-proxy進(jìn)程用來監(jiān)控后啟動的mysql-proxy進(jìn)程,實(shí)際提供服務(wù)的是后啟動的mysql-proxy進(jìn)程,一旦后啟動的mysql-proxy進(jìn)程掛掉(你可以自己kill試試),先啟動的mysql-proxy進(jìn)程會重新啟動一個mysql-proxy提供服務(wù)。

不過現(xiàn)在很多人用的還是舊版的MySQL-Proxy,此時可以利用init來實(shí)現(xiàn)類似keepalive的效果:

編寫腳本/usr/local/sbin/mysql-proxy.sh,加入以下內(nèi)容(具體寫法視安裝情況而定):

  1. LUA_PATH="/usr/local/mysql-proxy/share/mysql-proxy/?.lua" \  
  2. /usr/local/mysql-proxy/sbin/mysql-proxy \  
  3. --proxy-backend-addresses=192.168.0.1:3306 \  
  4. --proxy-read-only-backend-addresses=192.168.0.2:3306 \  
  5. --proxy-lua-script=/usr/local/mysql-proxy/share/mysql-proxy/rw-splitting.lua 

別忘了加上可執(zhí)行屬性:

  1. chmod a+x /usr/local/sbin/mysql-proxy.sh 

0.7.0版本有一個新的選項(xiàng):--defaults-file,可以把相關(guān)信息都寫到配置文件里:

  1. # MySQL Proxy's configuration file (mysql-proxy.cnf)  
  2.  
  3. [mysql-proxy]  
  4. daemon = true 
  5. keepalive = true 
  6. proxy-backend-addresses = 192.168.0.1:3306  
  7. proxy-read-only-backend-addresses = 192.168.0.2:3306  
  8. proxy-lua-script = /usr/local/mysql-proxy/share/mysql-proxy/rw-splitting.lua 

啟動時可以使用:mysql-proxy --defaults-file=mysql-proxy.cnf

修改inittab:

  1. vi /etc/inittab 

加入以下內(nèi)容:

  1. mp:12345:respawn:/usr/local/sbin/mysql-proxy.sh 

然后讓init重新讀取inittab內(nèi)容:

  1. kill -HUP 1 

系統(tǒng)會自動檢測/usr/local/sbin/mysql-proxy.sh是否正在運(yùn)行,如果沒有就自動運(yùn)行。

需要注意的是在編寫mysql-proxy.sh腳本的時候,不要加入--daemon選項(xiàng),否則/usr/local/sbin/mysql-proxy.sh一運(yùn)行就結(jié)束了,系統(tǒng)會不停的嘗試運(yùn)行腳本,從而在/var/log/message里留下大量的錯誤信息(init: Id "mp" respawning too fast: disabled for 5 minutes)。

init的方法可能顯得有點(diǎn)另類了,可以使用其他的工具,比如svscan。

有狀態(tài)的查詢

一些有狀態(tài)的特殊的查詢可能失效,比如說:

  1. SELECT SQL_CALC_FOUND_ROWS ..  
  2. SELECT FOUND_ROWS() 

這種查詢是有狀態(tài)的,應(yīng)該保證在同一個后端處理,查看rw-splitting.lua腳本可以看到MySQL-Proxy實(shí)際上已經(jīng)對這樣的查詢進(jìn)行了 判斷,但在實(shí)際應(yīng)用中發(fā)現(xiàn)還是存在問題。估計(jì)是腳本寫得不咋地,實(shí)際應(yīng)用中,建議大家不要使用這樣的查詢,一來沒有可移植性,而來效率也不見得好。

另一個可能會產(chǎn)生問題的查詢是:

  1. INSERT ... (AUTO_INCREMENT)  
  2. SELECT LAST_INSERT_ID() 

當(dāng)系統(tǒng)執(zhí)行完INSERT后,再執(zhí)行SELECT時,可能已經(jīng)被分發(fā)到了不同的后端服務(wù)器,如果你使用的編程語言是PHP的話,此時應(yīng)該通過 mysql_insert_id()來得到最新插入的id,每次INSERT結(jié)束后,其實(shí)對應(yīng)的autoincrement值就已經(jīng)計(jì)算好返回給PHP 了,你無需再發(fā)出一次獨(dú)立的查詢,直接用mysql_insert_id()就可以了。不過很多PHP程序使用的都是SELECT LAST_INSERT_ID()的方式,如AdbDB,CakePHP等等,如果你正在使用它們的話需多加小心。(當(dāng)使用bigint 時,mysql_insert_id()存在問題,詳情見手冊,不過對于大多數(shù)人而言,bigint基本不會遇到,所以你可以無視這個問題)

注:對于這兩個問題,官方BUG庫里有人給出了相應(yīng)的補(bǔ)丁。

LUA腳本問題

MySQL-Proxy讀寫分離的功能是通過lua腳本(rw-splitting.lua)實(shí)現(xiàn)的,但是這個腳本年久失修,問題多多,比如說使用時可能會出現(xiàn):

ERROR 1105: can't change DB to on slave

出現(xiàn)這個問題的原因在于當(dāng)客戶端發(fā)出查詢時,MySQL-Proxy會比較當(dāng)前客戶端所處數(shù)據(jù)庫和服務(wù)器所處數(shù)據(jù)庫是否一致,如果不一致則會在服務(wù)端嘗試執(zhí)行一個"USE 數(shù)據(jù)庫"的操作,一個可能性是主從服務(wù)器的數(shù)據(jù)庫結(jié)構(gòu)不同,在USE一個不存在的數(shù)據(jù)庫的時候自然會出錯,還有一個原因有些查詢操作并沒有所處數(shù)據(jù)庫這個上下文,比如說SHOW DATABASES這個查詢,并不需要事先“USE 數(shù)據(jù)庫”,只要連上服務(wù)器就可以執(zhí)行,這時候如果還嘗試同步客戶端和服務(wù)端所處的數(shù)據(jù)庫,出錯就是無法避免的事了。

rw-splitting.lua恰恰沒有屏蔽后者所描述的情況,修復(fù)方法如下,在合適的位置加入粗體代碼,

  1. 276         if cmd.type ~= proxy.COM_INIT_DB and  
  2. 277            c.default_db and c.default_db ~= "" and c.default_db ~= s.default_db then  
  3. if is_debug  
  4. 278                    print("    server default db: " .. s.default_db)  
  5. 279                    print("    client default db: " .. c.default_db)  
  6. 280                    print("    syncronizing")  
  7. end  
  8. 281                 proxy.queries:prepend(2, string.char(proxy.COM_INIT_DB) .. c.default_db)  
  9. 282         end 

在lua中,~=是不等于的意思,另外,lua里空字符串""用在if里被認(rèn)為是true,所以單靠c.default_db不夠。

順手加上is_debug的判斷,不然即使不是debug狀態(tài),服務(wù)器的命令行里也會偶爾冒出一些調(diào)試信息。

此外,新版MySQL-Proxy里,雖然源代碼包里有rw-splitting.lua腳本,但缺省并沒有安裝,你需要手動拷貝,而且數(shù)據(jù)結(jié)構(gòu)發(fā)生了變化,腳本需要按照數(shù)據(jù)結(jié)構(gòu)的變化做出適當(dāng)?shù)男薷摹?/p>

小結(jié):淺談使用MySQL Proxy LUA讀寫分離時注意事項(xiàng)的內(nèi)容介紹完了,希望通過本文的學(xué)習(xí)能對你有所幫助!

責(zé)任編輯:zhaolei 來源: 互聯(lián)網(wǎng)
相關(guān)推薦

2011-08-04 15:00:46

AmoebaMySQL

2011-08-30 12:49:59

Mysql ProxyLua分離

2011-08-30 09:59:47

Mysql ProxyLUA

2011-08-30 13:08:55

Mysql ProxyLua分離

2010-09-16 09:52:49

CSS display

2010-05-17 11:19:44

MySQL proxy

2010-11-26 16:27:01

MySQL使用變量

2011-08-02 13:08:06

Oracle索引

2011-07-04 17:55:59

Qt SDK Windows

2010-02-03 10:21:46

初學(xué)Python

2011-04-20 14:52:02

數(shù)據(jù)庫優(yōu)化

2010-08-10 08:49:32

FlexSDK4

2009-07-15 16:14:36

iBATIS優(yōu)缺點(diǎn)

2011-05-03 16:58:55

噴墨打印機(jī)墨水

2010-01-14 18:19:40

C++語言

2010-01-26 16:47:47

VC++6.0

2010-01-25 18:12:28

C++

2011-07-19 10:16:58

噴墨打印機(jī)注意事項(xiàng)

2010-01-18 14:25:19

使用C++Builde

2010-06-02 10:02:38

Linux mysql
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號