8000美元存儲135TB數(shù)據(jù):打造開源的存儲硬件
首先要說明的是,云存儲初創(chuàng)公司Backblaze率先提出了開源存儲硬件的概念。接來下,它展示了如何把135TB的數(shù)據(jù)放到一個4U機(jī)架(Backblaze稱之為pod),而所花費(fèi)的成本少于8000美元(也就是說每GB成本只有5美分左右)。現(xiàn)在很多證據(jù)顯示,越來越多人喜歡這家公司所做的事情:Backblaze在本周三推出了第三代Storage Pod的技術(shù)參數(shù)。但是與此對比,數(shù)百家公司構(gòu)建并且通過銷售這些設(shè)計方案來牟利。
但是,是誰使用了Backblaze的技術(shù)參數(shù)來構(gòu)建存儲系統(tǒng)呢?Netflix可能是最有名的一個(它使用Storage Pod作為CDN基礎(chǔ)設(shè)施的一部分),其他的還有Vanderbilt大學(xué),Crispin Porter + Bogusky, 倫斯勒理工學(xué)院以及NASA的噴氣推進(jìn)實(shí)驗(yàn)室,著名網(wǎng)上沖印公司Shutterfly(存儲PB級的數(shù)據(jù))也是使用的BackBlaze的Storage Pod架構(gòu)。
由于組織不同,具體的使用方式也是多種多樣。比如說,有像Netflix的CDN服務(wù),還有像Shutterstock這樣的面向消費(fèi)者的云存儲,很多人都是把Pod作為一個巨大的網(wǎng)絡(luò)附加存儲設(shè)備,每個人都能進(jìn)行訪問。“這里的數(shù)據(jù)比任何能想到的公司的數(shù)據(jù)都要龐大”Backblaze的創(chuàng)始人兼CEO Gleb Budman(左圖)告訴GigaOM的記者Derrick Harris,“它們使用了獨(dú)立磁盤冗余陣列。”
Backblaze擾亂了存儲行業(yè)!
Backblaze的設(shè)計發(fā)展的如此之快不應(yīng)該讓大家感到驚訝,Budman表示,存儲廠商一直努力地保護(hù)他們的利潤,通過加載“一次寫,很少讀”的系統(tǒng)提供企業(yè)級的功能,但是這些往往是沒有必要的。
所以,在大容量存儲的世界里,我們已經(jīng)進(jìn)入一個類似十年前的PC市場,如果想要便宜,用戶就需要自己購買零件進(jìn)行組裝,而不是直接購買那些已經(jīng)組裝好的品牌機(jī)。“DELL已經(jīng)扼殺了那些自主開發(fā)的電腦市場,那是因?yàn)樗麄円呀?jīng)而且真正的專注于優(yōu)化成本”Budman解釋說,“沒有一家廠商為存儲設(shè)備會這樣去做。”而存儲供應(yīng)商卻認(rèn)為“我們賣的是價值100萬美元的設(shè)計,為什么我們要改變呢?”
圖:Backblaze的數(shù)據(jù)中心充滿了Storage Pod
非常感謝Backblaze的努力,這種局面正在發(fā)生改變。源源不斷的零件需求指引了Protocase,這是一家加拿大的金屬片制造商,雖然只是生產(chǎn)Backblaze Pod的外殼,也開創(chuàng)了一個整體業(yè)務(wù)——很恰當(dāng)?shù)拿麨?5 Drives——圍繞銷售Pod零件或者已經(jīng)完全預(yù)裝好的Pod,他們已經(jīng)嘗試把業(yè)務(wù)做到加拿大以外的國家,現(xiàn)在Protocase已經(jīng)把Backblaze組件銷售到中國,俄羅斯以及巴西這些國家。
有意思的是,你不會看到Backblaze的設(shè)計,出現(xiàn)在其他著名的開源硬件成果上——像由Facebook引導(dǎo)的開源計算項(xiàng)目。Budman表示,他也和一些組織(那些試圖邀請Backblaze參與)的領(lǐng)導(dǎo)者進(jìn)行過會話,但是更多的是想讓幫助他們的開源計算系統(tǒng)工作。他表示自己很喜歡做一些理論研究,會有很多像Backblaze這樣的小公司用大量的時間來進(jìn)行宣傳。

3.0版:180TB——更低的成本
第三代的Storage Pod設(shè)計對于開源計算項(xiàng)目,45 Drives,數(shù)據(jù)媒體收集的愛好者以及任何想打造自己存儲裝置的家伙們來說,都是一個福音。由于4TB硬盤驅(qū)動器的普及,總體的容量已經(jīng)提升到180TB。Backblaze已經(jīng)驗(yàn)證了很多種的硬盤驅(qū)動器,這也源于在2010年由于依賴一種單一的模式得到的嚴(yán)厲教訓(xùn)。公司還更換了大量的過去使用的組件,涉及的領(lǐng)域從主板到內(nèi)存再到SATA線路。
Budman解釋了所有改變,以及產(chǎn)品開發(fā)背后的故事,這些都發(fā)表在周三早上的一篇博客中,而最重要的主題就是提升了產(chǎn)品的可靠性,而且成本得到了大幅度的降低,最新的設(shè)計比第二代的設(shè)計節(jié)省了大量的成本。但是由于產(chǎn)品的短缺,目前的價格對比前幾年的來說,還是有一點(diǎn)高。
無論發(fā)生了什么事,存儲系統(tǒng)的設(shè)計都應(yīng)該是透明的。Budman希望這樣最少可以對實(shí)現(xiàn)廉價存儲存在持久的影響,他認(rèn)為未來不應(yīng)該因?yàn)榘嘿F的設(shè)備而無法進(jìn)行數(shù)據(jù)的存儲。