數(shù)據(jù)庫系統(tǒng)優(yōu)化--業(yè)務(wù)邏輯設(shè)計優(yōu)化
導(dǎo)讀:當(dāng)我們優(yōu)化一個系統(tǒng)時,有時發(fā)現(xiàn)一種情況就是自己修改SQL,索引以及分區(qū)是不能解決性能問題的。這時你要考慮業(yè)務(wù)邏輯優(yōu)化和表設(shè)計的重構(gòu)。這兩點的確和設(shè)計結(jié)合的很緊密。下文中將會為大家詳細介紹這兩種優(yōu)化。
業(yè)務(wù)邏輯優(yōu)化
結(jié)合實際,我們先談?wù)剺I(yè)務(wù)邏輯優(yōu)化。
案例一:
我們的系統(tǒng)一個文檔模塊,客戶點擊時很慢,通過性能分析,是點擊是去查詢數(shù)據(jù)庫,這時系統(tǒng)是通過Hibernate來兩步處理:
1,計算該類型的文檔數(shù)量總數(shù)。
2,顯示最新文檔的前20篇文檔。
這時顯示第二步的時間是很快的,只取20條記錄,但是計算該類型的所有總數(shù)很慢。系統(tǒng)的這時的輸入是很大的(計算該類型的全部文檔,可能有幾萬篇數(shù)據(jù)),輸出就一條總數(shù)。這時因為業(yè)務(wù)邏輯復(fù)雜,即使建立索引,分區(qū)等等速度也是無法提高,因為不能真正做到索引覆蓋和分區(qū)消除。
客戶是點一下要等十幾秒是不能容忍的,這時可能輸入數(shù)據(jù)量很大下,數(shù)據(jù)庫很可能采用的是hash聯(lián)結(jié),而且并發(fā)用戶一大,數(shù)據(jù)庫服務(wù)器壓力很大。
這時常規(guī)的優(yōu)化方法是沒有效果的。這時我們也發(fā)現(xiàn),客戶其實對以前比較老的數(shù)據(jù)是不關(guān)心的,一般只是對近期的數(shù)據(jù)比較感興趣,所有我們就在查詢時默認設(shè)定半年的時間,然后在時間上設(shè)定聚集索引。并默認在此時間上排序,使其使用合并聯(lián)結(jié),減少輸入數(shù)據(jù)量,結(jié)果速度有明顯的提升。
案例二:
我們在優(yōu)化一個客戶系統(tǒng)時,碰到一種情況,在客戶的一選擇功能時,客戶點擊一下選擇相關(guān)數(shù)據(jù),這時頁面要要幾分鐘才能出來,客戶很不滿意,這時修改sql和索引都沒有辦法,他的輸入的數(shù)據(jù)量也很大,和上面一下也要計算總數(shù)和取最新前幾條數(shù)據(jù)。
這時我們在查詢是關(guān)聯(lián)了人員,通過調(diào)查,發(fā)現(xiàn)客戶只對和自己相關(guān)的數(shù)據(jù)感興趣。也只是查詢自己相關(guān)的數(shù)據(jù)。所以這時在sql語句里增加用戶id這條限制,同時在增加userid的索引,這樣一來,速度就大大提高。
總結(jié):
當(dāng)然以上兩個案例,是從輸入入手,減少輸入和輸出的數(shù)據(jù)量,主要優(yōu)化業(yè)務(wù)邏輯,達到優(yōu)化系統(tǒng)。當(dāng)然有些情況要和客戶確認和說服他們,有時他們不一定都認可,這時要說明這樣做的目的,相信他們也會理解。
表設(shè)計優(yōu)化
表設(shè)計,在我們開發(fā)系統(tǒng)時已經(jīng)確定,好的設(shè)計的確能大大提高性能,我們在優(yōu)化系統(tǒng)時,碰到一個比較麻煩的問題。
原文: 數(shù)據(jù)庫重構(gòu)(一):字段合并
這條sql是判斷5個維度,一個用戶id, 一個機構(gòu)id,一個崗位id, 還有級別判斷和是否公共。sql語句里有5個”or“組成查詢,表數(shù)據(jù)一大就表掃描,性能很差,但業(yè)務(wù)要求和系統(tǒng)要求這樣判斷。即使在表中這五個字段都建索引,速度也不會快。太多"OR"了,SQL Server 查詢分析器無法優(yōu)化。
這時由于設(shè)計時: 用戶id,機構(gòu)id,崗位id為3個只有一個有數(shù)據(jù)。所以將這3個字段合并,較少"Or"語句,讓數(shù)據(jù)庫能使用索引。
總結(jié):
表設(shè)計是優(yōu)化是讓sql語句能使用到索引,或者增加冗余字段減少其輸入和輸出數(shù)據(jù),或者減少查詢數(shù)據(jù)(如計算靜態(tài)表),典型的如索引視圖,數(shù)據(jù)倉庫等。
上文中通過實例來詳細介紹了兩種數(shù)據(jù)庫優(yōu)化,即業(yè)務(wù)邏輯優(yōu)化和表設(shè)計優(yōu)化,用實例是將抽象的食物具體化,更利于大家的理解,希望大家都能從上文的介紹中收獲各自需要的。
【編輯推薦】