MySQL優(yōu)化經驗和方法匯總
公司網站訪問量越來越大,MySQL自然成為瓶頸,因此最近我一直在研究MySQL的優(yōu)化,***步自然想到的是MySQL系統(tǒng)參數的優(yōu)化,作為一個訪問量很大的網站(日20萬人次以上)的數據庫系統(tǒng),不可能指望 MySQL 默認的系統(tǒng)參數能夠讓MySQL運行得非常順暢。
在Apache, PHP, MySQL的體系架構中,MySQL對于性能的影響***,也是關鍵的核心部分。對于Discuz!論壇程序也是如此,MySQL的設置是否合理優(yōu)化,直接 影響到論壇的速度和承載量!同時,MySQL也是優(yōu)化難度***的一個部分,不但需要理解一些MySQL專業(yè)知識,同時還需要長時間的觀察統(tǒng)計并且根據經驗進行判斷,然后設置合理的參數。 下面我們了解一下MySQL優(yōu)化的一些基礎,MySQL的優(yōu)化我分為兩個部分,一是服務器物理硬件的優(yōu)化,二是MySQL自身(my.cnf)的優(yōu)化。
一、服務器硬件對MySQL性能的影響
① 磁盤尋道能力(磁盤I/O),以目前高轉速SCSI硬盤(7200轉/秒)為例,這種硬盤理論上每秒尋道7200次,這是物理特性決定的,沒有辦法改變。 MySQL每秒鐘都在進行大量、復雜的查詢操作,對磁盤的讀寫量可想而知。所以,通常認為磁盤I/O是制約MySQL性能的***因素之一,對于日均訪問量 在100萬PV以上的Discuz!論壇,由于磁盤I/O的制約,MySQL的性能會非常低下!解決這一制約因素可以考慮以下幾種解決方案: 使用RAID-0+1磁盤陣列,注意不要嘗試使用RAID-5,MySQL在RAID-5磁盤陣列上的效率不會像你期待的那樣快。
②CPU 對于MySQL應用,推薦使用S.M.P.架構的多路對稱CPU,例如:可以使用兩顆Intel Xeon 3.6GHz的CPU,現在我較推薦用4U的服務器來專門做數據庫服務器,不僅僅是針對于mysql。
③物理內存對于一臺使用MySQL的Database Server來說,服務器內存建議不要小于2GB,推薦使用4GB以上的物理內存,不過內存對于現在的服務器而言可以說是一個可以忽略的問題,工作中遇到了高端服務器基本上內存都超過了16G。
二、 MySQL自身因素
當解決了上述服務器硬件制約因素后,讓我們看看MySQL自身的優(yōu)化是如何操作的。對MySQL自身的優(yōu)化主要是對其配置文件 my.cnf中的各項參數進行優(yōu)化調整。下面我們介紹一些對性能影響較大的參數。 由于my.cnf文件的優(yōu)化設置是與服務器硬件配置息息相關的,因而我們指定一個假想的服務器硬件環(huán)境:
- CPU:2顆Intel Xeon 2.4GHz
- 內存:4GB DDR
- 硬盤:SCSI 73GB(很常見的2U服務器)。
下面,我們根據以上硬件配置結合一份已經優(yōu)化好的my.cnf進行說明:
- #vim /etc/my.cnf以下只列出my.cnf文件中[mysqld]段落中的內容,其他段落內容對MySQL運行性能影響甚微,因而姑且忽略。
- [mysqld]
- port = 3306
- serverid = 1
- socket = /tmp/mysql.sock
- skip-locking
- #避免MySQL的外部鎖定,減少出錯幾率增強穩(wěn)定性。
- skip-name-resolve
- #禁止MySQL對外部連接進行DNS解析,使用這一選項可以消除MySQL進行DNS解析的時間。但需要注意,如果開啟該選項,則所有遠程主機連接授權都要使用IP地址方式,否則MySQL將無法正常處理連接請求!
- back_log = 384
- #back_log 參數的值指出在MySQL暫時停止響應新請求之前的短時間內多少個請求可以被存在堆棧中。 如果系統(tǒng)在一個短時間內有很多連接,則需要增大該參數的值,該參數值指定到來的TCP/IP連接的偵聽隊列的大小。不同的操作系統(tǒng)在這個隊列大小上有它自 己的限制。 試圖設定back_log高于你的操作系統(tǒng)的限制將是無效的。默認值為50。對于Linux系統(tǒng)推薦設置為小于512的整數。
- key_buffer_size = 256M
- #key_buffer_size指定用于索引的緩沖區(qū)大小,增加它可得到更好的索引處理性能。對于內存在4GB左右的服務器該參數可設置為256M或384M。注意:該參數值設置的過大反而會是服務器整體效率降低!
- max_allowed_packet = 4M
- thread_stack = 256K
- table_cache = 128K
- sort_buffer_size = 6M
- #查詢排序時所能使用的緩沖區(qū)大小。注意:該參數對應的分配內存是每連接獨占,如果有100個連接,那么實際分配的總共排序緩沖區(qū)大小為100 × 6 = 600MB。所以,對于內存在4GB左右的服務器推薦設置為6-8M。
- read_buffer_size = 4M
- #讀查詢操作所能使用的緩沖區(qū)大小。和sort_buffer_size一樣,該參數對應的分配內存也是每連接獨享。
- join_buffer_size = 8M
- #聯合查詢操作所能使用的緩沖區(qū)大小,和sort_buffer_size一樣,該參數對應的分配內存也是每連接獨享。
- myisam_sort_buffer_size = 64M
- table_cache = 512
- thread_cache_size = 64
- query_cache_size = 64M
- # 指定MySQL查詢緩沖區(qū)的大小。可以通過在MySQL控制臺觀察,如果Qcache_lowmem_prunes的值非常大,則表明經常出現緩沖不夠的 情況;如果Qcache_hits的值非常大,則表明查詢緩沖使用非常頻繁,如果該值較小反而會影響效率,那么可以考慮不用查詢緩 沖;Qcache_free_blocks,如果該值非常大,則表明緩沖區(qū)中碎片很多。
- tmp_table_size = 256M
- max_connections = 768
- #指定MySQL允許的***連接進程數。如果在訪問論壇時經常出現Too Many Connections的錯誤提 示,則需要增大該參數值。
- max_connect_errors = 10000000
- wait_timeout = 10
- #指定一個請求的***連接時間,對于4GB左右內存的服務器可以設置為5-10。
- thread_concurrency = 8
- #該參數取值為服務器邏輯CPU數量*2,在本例中,服務器有2顆物理CPU,而每顆物理CPU又支持H.T超線程,所以實際取值為4*2=8
- skip-networking
- #開啟該選項可以徹底關閉MySQL的TCP/IP連接方式,如果WEB服務器是以遠程連接的方式訪問MySQL數據庫服務器則不要開啟該選項!否則將無法正常連接!
- table_cache=1024
- #物理內存越大,設置就越大.默認為2402,調到512-1024***
- innodb_additional_mem_pool_size=4M
- #默認為2M
- innodb_flush_log_at_trx_commit=1
- #設置為0就是等到innodb_log_buffer_size列隊滿后再統(tǒng)一儲存,默認為1
- innodb_log_buffer_size=2M
- #默認為1M
- innodb_thread_concurrency=8
- #你的服務器CPU有幾個就設置為幾,建議用默認一般為8
- key_buffer_size=256M
- #默認為218,調到128***
- tmp_table_size=64M
- #默認為16M,調到64-256最掛
- read_buffer_size=4M
- #默認為64K
- read_rnd_buffer_size=16M
- #默認為256K
- sort_buffer_size=32M
- #默認為256K
- thread_cache_size=120
- #默認為60
- query_cache_size=32M
※值得注意的是: 很多情況需要具體情況具體分析 。
如果Key_reads太大,則應該把my.cnf中Key_buffer_size變大,保持Key_reads/Key_read_requests至少1/100以上,越小越好。