以太網(wǎng)在存儲(chǔ)領(lǐng)域的應(yīng)用可以說成功嗎?

iSCSI(IP SAN)從提出到進(jìn)入市場(chǎng)，也就是大約10年的時(shí)間，如今已經(jīng)從傳統(tǒng)光纖通道(FC)SAN存儲(chǔ)網(wǎng)絡(luò)手中成功分得一杯羹。并且隨著10GbE(萬兆以太網(wǎng))的普及和DCB無損以太網(wǎng)的應(yīng)用，iSCSI在可預(yù)見的范圍內(nèi)仍將保持一定時(shí)間的較高增長率。NAS文件存儲(chǔ)的情況，筆者覺得有些受當(dāng)前經(jīng)濟(jì)形勢(shì)的影響，盡管人們都看好非結(jié)構(gòu)化數(shù)據(jù)的增加，但短時(shí)間內(nèi)的投資情況可能不夠樂觀。

FCoE是否成功：交換機(jī)/適配器廠商各執(zhí)一詞

曾被人們寄予厚望的FCoE(以太網(wǎng)光纖通道)，它的實(shí)際應(yīng)用推進(jìn)速度似乎遠(yuǎn)低于人們的預(yù)期。上個(gè)月在美國圣何塞舉行的博科分析師與科技日上，博科數(shù)據(jù)中心和企業(yè)網(wǎng)絡(luò)副總裁Jason Nolet表示：“我們?cè)贔CoE上投入了大量資金研發(fā)，但現(xiàn)實(shí)的情況是采用率較低，不僅是從服務(wù)器到架頂式交換機(jī)，端到端的存儲(chǔ)應(yīng)用幾乎沒有。但我們會(huì)繼續(xù)努力，保持關(guān)注。”

至于客戶不愿采用FCoE的原因，Jason Nolet認(rèn)為不是技術(shù)問題，而是不愿破壞15年來在傳統(tǒng)SAN基礎(chǔ)設(shè)施上的投入。FCoE“虛假承諾”融合不同的基礎(chǔ)架構(gòu)，但無法保證達(dá)到FC的性能和可靠性，而且負(fù)責(zé)以太網(wǎng)和存儲(chǔ)網(wǎng)絡(luò)的兩個(gè)組織機(jī)構(gòu)沒有協(xié)調(diào)好。

9月12日在大會(huì)現(xiàn)場(chǎng)展示的Brocade DCX 8510-4 Backbone 16Gb/s FC核心交換機(jī)。
以太網(wǎng)依舊是博科技術(shù)日的主要話題，但如今提起FCoE的人已經(jīng)少多了...

占據(jù)優(yōu)勢(shì)地位的FC交換機(jī)廠商這樣說，以網(wǎng)絡(luò)適配器為主業(yè)的公司對(duì)FCoE市場(chǎng)的發(fā)展又是什么樣的觀點(diǎn)呢?

在上周Emulex中國公司開業(yè)慶典暨北京新址開業(yè)儀式的采訪中，Emulex總裁兼***運(yùn)營官Jeff Benck表示：“FCoE作為一個(gè)技術(shù)層面，它的增長速度顯然是沒有能夠達(dá)到我們幾年前預(yù)期的那么快。但是每年我們都看到了FCoE產(chǎn)品和技術(shù)出現(xiàn)的增長。目前FCoE產(chǎn)品占我們以太網(wǎng)產(chǎn)品的15%，而且隨著我們?cè)谌f兆級(jí)以太網(wǎng)市場(chǎng)不斷地發(fā)展，估計(jì)這個(gè)比率將繼續(xù)保持下去，所以它仍然會(huì)出現(xiàn)成熟性的增長。目前英特爾推出的Sandy Bridge服務(wù)器即Romley平臺(tái)會(huì)進(jìn)一步發(fā)展，在萬兆級(jí)以太網(wǎng)中FCoE作為強(qiáng)有力的組成部分，預(yù)計(jì)明年這部分的增長速度將更快。”

Jeff Benck還說：“現(xiàn)在我們正在大力推動(dòng)基于融合型以太網(wǎng)的RDMA(RoCE)解決方案，預(yù)計(jì)明年這項(xiàng)技術(shù)將廣泛應(yīng)用在我們的萬兆以太網(wǎng)市場(chǎng)。除此之外明年我們還將繼續(xù)推動(dòng)40Gb以太網(wǎng)相關(guān)的產(chǎn)品，這能夠進(jìn)一步的將部分高性能計(jì)算的工作流轉(zhuǎn)移到以太網(wǎng)上。”

在Emulex的一份資料中，筆者看到了這樣一段話：

“我們計(jì)劃將支持RoCE(融合以太網(wǎng)上的RDMA)的下一代40/100GbE解決方案的成本和性能優(yōu)勢(shì)相結(jié)合，使公司可以從老牌InfiniBand(IB)提供商手中賺取HPC市場(chǎng)份額。正如Emulex在早期10GbE過渡過程中利用存儲(chǔ)(iSCSI和光纖通道)堆棧來對(duì)更大型競(jìng)爭(zhēng)對(duì)手進(jìn)行側(cè)翼包圍的做法一樣，公司將充分利用RoCE，在向40和100GbE技術(shù)過渡的過程中進(jìn)一步鞏固業(yè)務(wù)和戰(zhàn)略領(lǐng)先優(yōu)勢(shì)。”

這個(gè)圖片來自2010年7月Emulex的演講資料

先不討論前面一句HPC的，對(duì)于以太網(wǎng)給Emulex帶來新的增長點(diǎn)，以及他們利用存儲(chǔ)特性在10GbE市場(chǎng)競(jìng)爭(zhēng)中獲益這些，筆者都能認(rèn)同。 Emulex、QLogic和Brocade在以太網(wǎng)存儲(chǔ)應(yīng)用普及，特別是看到未來傳統(tǒng)FC被FCoE替代的可能性下，都有類似的轉(zhuǎn)型動(dòng)作，而應(yīng)該說 Emulex較另外兩者在這方面做得更堅(jiān)決。通過最近幾個(gè)季度的財(cái)報(bào)，我們已經(jīng)能看出效果了。

Jeff Benck對(duì)此這樣表示：“我們對(duì)于萬兆以太網(wǎng)的市場(chǎng)造成了顛覆性影響，戰(zhàn)勝了英特爾和博通，我們通過萬兆級(jí)的產(chǎn)品給客戶提供了一些新的價(jià)值，這樣客戶可以重新思考自己應(yīng)該采用什么樣的產(chǎn)品。我們所推出的解決方案不僅是加速，而且具備新的功能。”

這里所謂的新價(jià)值，或者說新功能，就是在相同硬件(包括LOM芯片和CNA適配卡)上提供普通10GbE以太網(wǎng)、iSCSI和FCoE三種不同應(yīng)用形式。我們無法去實(shí)際驗(yàn)證Emulex聲稱的端口出貨數(shù)量，但更加完善的存儲(chǔ)堆棧，確實(shí)幫助他們贏得IBM和惠普等刀片/機(jī)架式服務(wù)器的選擇。

RoCE：Emulex以太網(wǎng)的下一個(gè)“FCoE”

接著再看高性能計(jì)算。InfiniBand很早就推出了10Gb/s速率的產(chǎn)品，在萬兆以太網(wǎng)還沒完全普及的今天，40Gb/s(DDR)和56Gb/s(QDR)IB已經(jīng)在成為主流，預(yù)計(jì)下一代技術(shù)將是100Gb/s的EDR(8*12.5Gb/s)。

除了帶寬之外，HPC應(yīng)用對(duì)網(wǎng)絡(luò)的延時(shí)也相當(dāng)敏感。IB在這方面的優(yōu)勢(shì)主要來自RDMA(遠(yuǎn)程直接內(nèi)存訪問)，而以太網(wǎng)則“輸”在TCP/IP協(xié)議上。Mellanox ConnectX-3雙端口適配器/芯片方案的MPI(消息傳遞接口)ping延時(shí)只有1微秒，而受TCP/IP數(shù)據(jù)封包效率影響的以太網(wǎng)ping延時(shí)可達(dá)幾十微秒。

Mellanox ConnectX-3 InfiniBand/VPI芯片模塊圖、關(guān)鍵特性

我們知道閃存的延時(shí)大大低于機(jī)械硬盤，因此這兩年市場(chǎng)中出現(xiàn)的一些高性能固態(tài)存儲(chǔ)系統(tǒng)提供了InfiniBand主機(jī)接口，比如運(yùn)行Fusion-io ION(離子)軟件的外部閃存存儲(chǔ)方案，以及Mellanox VSA高速塊存儲(chǔ)目標(biāo)端&網(wǎng)關(guān)軟件。

那么，如果以太網(wǎng)應(yīng)用RDMA之后延時(shí)會(huì)顯著改善嗎?答案是肯定的，盡管它仍然不具備InfiniBand的一些先天優(yōu)勢(shì)，正所謂術(shù)業(yè)有專攻。

不同速率服務(wù)器(網(wǎng)絡(luò))適配器和板載網(wǎng)絡(luò)端口的市場(chǎng)出貨量統(tǒng)計(jì)及預(yù)測(cè)。
來源：Crehan Research，2011年2月。從這個(gè)看的話，未來40GbE有可能與InfiniBand爭(zhēng)搶市場(chǎng)。

記者：如果說RoCE是Emulex的下一個(gè)重要機(jī)會(huì)的話，這扇門是否也面對(duì)其他廠商敞開呢?比如英特爾和Mellanox兩家公司就同時(shí)具備以太網(wǎng)和InfiniBand技術(shù)。談到RoCE，他們?cè)贖PC行業(yè)中的經(jīng)驗(yàn)更加豐富。Emulex對(duì)此怎么看呢?

Jeff Benck回答說：“目前我們推出的RoCE產(chǎn)品是針對(duì)40G的市場(chǎng)，當(dāng)然有一些高端的高性能計(jì)算用戶仍然會(huì)使用InfiniBand。但是現(xiàn)在數(shù)據(jù)中心一個(gè)通用的趨勢(shì)就是減少延遲和增加帶寬，所以我相信目前使用以太網(wǎng)的用戶以后會(huì)繼續(xù)使用以太網(wǎng)產(chǎn)品。我們并不是說要和Mellanox來進(jìn)行競(jìng)爭(zhēng)，推我們自己的Emulex的產(chǎn)品，這不是我們的戰(zhàn)略所在;而相反的是，我們是希望把目前應(yīng)用在InfiniBand上的一些工作負(fù)荷流轉(zhuǎn)移到以太網(wǎng)當(dāng)中，通過RDMA的形式。以太網(wǎng)一直是我們的優(yōu)勢(shì)，也將繼續(xù)是我們的工作核心和重點(diǎn)。

另外我想補(bǔ)充一下。如果你看一下Mellanox這家公司，他們的以太網(wǎng)產(chǎn)品只占我們的25%，因此我們?cè)谶@方面具備較大優(yōu)勢(shì)。再看Intel，對(duì)QLogic(IB業(yè)務(wù))的兼并，的確使Intel具備了InfiniBand相關(guān)產(chǎn)品解決方案，但是他們的產(chǎn)品技術(shù)有些落后。當(dāng)他們?cè)谕苿?dòng)針對(duì)InfiniBand的FDR和EDR解決方案的時(shí)候，在適應(yīng)40G以太網(wǎng)上的步伐肯定比我們走的要慢。”

總結(jié)：以筆者的了解，行業(yè)對(duì)RoCE沒有當(dāng)初的FCoE那樣看好，估計(jì)它在短時(shí)間內(nèi)給InfiniBand帶來的威脅也會(huì)比較有限。但就像上一次FCoE對(duì)Emulex的幫助那樣，RoCE的確有可能給他們以太網(wǎng)業(yè)務(wù)的發(fā)展帶來下一個(gè)增長點(diǎn)。畢竟Intel和Mellanox應(yīng)該不希望“左右互搏”，對(duì)RoCE的支持恐怕不會(huì)太積極吧?