在公司當(dāng)前環(huán)境中，VMware虛擬化環(huán)境承載著大約80%的應(yīng)用系統(tǒng)的運(yùn)行。隨著應(yīng)用系統(tǒng)和虛擬桌面需求增多，尤其各種業(yè)務(wù)系統(tǒng)突發(fā)增多，傳統(tǒng)的存儲(chǔ)規(guī)劃已經(jīng)無(wú)法滿足要求，需要靈活的應(yīng)對(duì)VMware環(huán)境存儲(chǔ)需求的方案。隨著各種軟件定義存儲(chǔ)的發(fā)展和使用，我們也在嘗試和尋找一個(gè)比較成熟的針對(duì)VMware環(huán)境的軟件定義存儲(chǔ)方案。

存儲(chǔ)方案的基本原則：

• 靈活快速部署，通過(guò)監(jiān)控當(dāng)前環(huán)境存儲(chǔ)的狀態(tài)能夠通過(guò)快速部署應(yīng)對(duì)存儲(chǔ)性能和容量的需求增長(zhǎng)。
• 在滿足性能要求的前提下，降低成本。
• 通用型存儲(chǔ)，以便該存儲(chǔ)方案能夠應(yīng)對(duì)其他應(yīng)用場(chǎng)景的需求。

[[209214]]

結(jié)合VMware所兼容的存儲(chǔ)類型接口，在軟件定義存儲(chǔ)的選型中，我們對(duì)當(dāng)前主流的幾款軟件定義存儲(chǔ)做了一些測(cè)試以及分析，綜合下來(lái)有以下特點(diǎn)：

一些開源軟件定義存儲(chǔ)已經(jīng)可以通過(guò)部署iSCSI Gateway提供block存儲(chǔ)掛載給VMware ESXi主機(jī)使用，但目前此方案還不成熟，比如Ceph。

一些存儲(chǔ)公司的軟件定義存儲(chǔ)產(chǎn)品已可以與VMware環(huán)境集成，但有些產(chǎn)品集成度過(guò)高，不夠通用;還有些產(chǎn)品可以獨(dú)立部署，作為通用存儲(chǔ)使用，除了能夠提供對(duì)VMware存儲(chǔ)集成支持，也可適用于其他應(yīng)用場(chǎng)景。在這一點(diǎn)上，比較符合我們選型前所設(shè)定的基本原則。

那么，如何對(duì)此存儲(chǔ)集群進(jìn)行設(shè)計(jì)?

在設(shè)計(jì)前，需要結(jié)合當(dāng)前VMware運(yùn)行環(huán)境的特點(diǎn)以及容量和性能需求做統(tǒng)一考慮：

• 通過(guò)監(jiān)控當(dāng)前VMware環(huán)境，我們發(fā)現(xiàn)，在此環(huán)境中存儲(chǔ)的讀寫比例約為7:3，讀操作明顯更多
• 結(jié)合虛擬桌面的特點(diǎn)，也更多的是讀操作
• 容量需求
• 虛擬桌面的鏡像存儲(chǔ)需要更優(yōu)的讀性能

結(jié)合容量以及未來(lái)增長(zhǎng)需求，我們考慮此存儲(chǔ)集群的存儲(chǔ)節(jié)點(diǎn)不會(huì)超過(guò)16個(gè)，我們最終按以下架構(gòu)進(jìn)行了***期部署：

• 采用兩套獨(dú)立的10gb網(wǎng)絡(luò)用于不同的通信：

1. Private network用于存儲(chǔ)節(jié)點(diǎn)之間通信，作為數(shù)據(jù)rebuild和rebalance網(wǎng)絡(luò)

2. Public network用于存儲(chǔ)客戶端與存儲(chǔ)集群通信，作為數(shù)據(jù)存儲(chǔ)網(wǎng)絡(luò)

• 采用6臺(tái)X86服務(wù)器作為存儲(chǔ)節(jié)點(diǎn)，每臺(tái)服務(wù)器配置：

1. 10K SAS 1.2TB × 20

2. SSD 480GB × 4

• 存儲(chǔ)池和Cache設(shè)置：

1. 根據(jù)硬盤分類將集群分為兩個(gè)存儲(chǔ)池：SAS pool和SSD pool

2. 使用一部分存儲(chǔ)節(jié)點(diǎn)內(nèi)存作為緩存

3. 每臺(tái)存儲(chǔ)節(jié)點(diǎn)使用一塊SSD作為SAS pool讀緩存

4. SSD pool主要用于存放虛擬桌面鏡像

• 容錯(cuò)配置：

為了應(yīng)對(duì)服務(wù)器故障，同時(shí)由于存儲(chǔ)集群節(jié)點(diǎn)較少，我們?cè)O(shè)置每臺(tái)服務(wù)器作為一個(gè)Fault set，同時(shí)預(yù)留一臺(tái)服務(wù)器的容量空間作為spare space，可以應(yīng)對(duì)一臺(tái)服務(wù)器故障。隨著集群增大，可以靈活更改此預(yù)留空間比例。

我們通過(guò)FIO對(duì)此存儲(chǔ)集群做了一個(gè)簡(jiǎn)單的性能測(cè)試，結(jié)果如下：

當(dāng)然，VMware環(huán)境的實(shí)際IO類型要比以上的測(cè)試更為復(fù)雜，目前此套集群已經(jīng)能滿足當(dāng)前需求。我們也將不斷根據(jù)實(shí)際使用情況和需求，逐步增加集群存儲(chǔ)節(jié)點(diǎn)，結(jié)合cache技術(shù)，進(jìn)行存儲(chǔ)性能優(yōu)化。