“

“技術(shù)必須和時代的商業(yè)需求一致，這樣才能產(chǎn)生真正可以持續(xù)發(fā)展的產(chǎn)品。”

”

滕昱，戴爾易安信UDS軟件工程總監(jiān)，他在戴爾易安信十二年的堅持，作為一個存儲研發(fā)人一路走來，在采訪中他告訴了我們這句話。

在這一時期職業(yè)生涯中，這也成為了他最重要的領(lǐng)悟。

一追十二年，企業(yè)云存儲的發(fā)展“起起伏伏，高高低低”，他的故事和經(jīng)歷會給我們帶來怎樣的啟發(fā)和思考？

[[261524]]

戴爾易安信UDS軟件工程總監(jiān) 滕昱

一個時代，有一個時代的特點

2006年之前，屬于云計算的史前時代。

當(dāng)時，出現(xiàn)了各式各樣的企業(yè)分布式開發(fā)與存儲的雛形。例如，IBM聚焦企業(yè)分布式開發(fā)，早早就提出了網(wǎng)格計算的框架。但是，這樣面對企業(yè)開發(fā)的繁雜模式，終究未能得到廣泛普及。

其中一個重要的原因在于，包括網(wǎng)格計算在內(nèi)的“史前云技術(shù)”的“生不逢時”，在企業(yè)級用戶還沒有出現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)的海量爆發(fā)之時，這些計算的框架自然很難得到用戶的落地與應(yīng)用。最終因為網(wǎng)格計算在商業(yè)模式、技術(shù)上的不足，未能取得預(yù)期的成功。

2006年被稱為公有云的元年，拉開了一個新時代的帷幕。隨著亞馬遜AWS的S3誕生，對象存儲逐漸被更多的人所認識。

[[261525]]

然而，對象存儲其實并沒有一開始打算支持企業(yè)應(yīng)用，S3針對的是同一時間興起互聯(lián)網(wǎng)新應(yīng)用的存儲需求。具體包括了支持REST接口，支持最簡單的儲存需求，甚至S3的API核心一直不支持Update，而把精力放在了支持scale-out易擴容方式。

因此，S3針對的是在公有云平臺上非企業(yè)用戶的非結(jié)構(gòu)化海量數(shù)據(jù)存儲的需求，對于還沒有考慮上公有云的大部分企業(yè)級用戶來說，諸如醫(yī)療、銀行、證券等領(lǐng)域的企業(yè)級應(yīng)用，S3公有云的對象存儲在提供靈活和彈性的同時，卻無法滿足這些企業(yè)用戶在傳統(tǒng)應(yīng)用工作負載上的對于安全，效率和開銷的要求。

一個時代，更有一個時代的創(chuàng)新

2006年，也成為了戴爾易安信進入對象存儲領(lǐng)域的重要之年。

這一年，戴爾易安信啟動了Atmos項目，正式開始了企業(yè)級對象存儲探索之路。而滕昱也在項目啟動的第二年正式加入了戴爾易安中國COE（Center Of Excellence）上海研發(fā)團隊。

只是現(xiàn)在回過頭來看，從2006年到2010年，業(yè)界對于分布式對象存儲在企業(yè)領(lǐng)域應(yīng)用還處于初級階段。與公有云海量數(shù)據(jù)爆發(fā)不一樣的是，企業(yè)數(shù)據(jù)量一直處于一個不溫不火的狀態(tài)。為此，Atmos產(chǎn)品和研發(fā)團隊也經(jīng)歷了相當(dāng)長一段時間去尋找突破口，在這段時間中，滕昱也深深體會到了“技術(shù)定要配合市場，順應(yīng)時代潮流”的這一行業(yè)發(fā)展規(guī)律的價值。

事情的發(fā)展往往會辨證地統(tǒng)一在一起。就在這幾年的徘徊與摸索中，滕昱帶領(lǐng)并鍛煉了一支擁有強大戰(zhàn)斗力的中國研發(fā)團隊。到了2014年5月，借助戴爾易安信Atmos的基礎(chǔ)，融入了分布式存儲的軟件定義基因，戴爾易安信ECS(Elastic Cloud Storage ) 正式走入了全球用戶的視野。

▲▲▲點擊圖片了解戴爾易安信ECS詳細資料

之后，代表企業(yè)級存儲勢力的對象存儲ECS獲得了長足發(fā)展。一向在企業(yè)級存儲領(lǐng)域穩(wěn)扎穩(wěn)打的戴爾易安信，在ECS定位上自然需要與公有云的對象存儲有所區(qū)別，但不能完全割裂開來發(fā)展，畢竟S3已經(jīng)成為了對象存儲“事實上的標(biāo)準API”。

為此，ECS既要對接S3滿足用戶對于自己傳統(tǒng)存儲平臺的云化要求，又要同時滿足企業(yè)級用戶針對傳統(tǒng)和下一代工作負載的需求。就此，ECS在S3標(biāo)準API之外極大地擴充了企業(yè)存儲的特性。比如，支持by-range update，提供多站點多活（active-active）的強一致性保證。并且從成本對比來分析，對于企業(yè)集中訪問的核心數(shù)據(jù)集，ECS可以幫助企業(yè)用戶顯著減少總體擁有成本。

更為關(guān)鍵的是，ECS趕上了2014年之后出現(xiàn)的企業(yè)級用戶的非結(jié)構(gòu)化海量數(shù)據(jù)的暴增趨勢，尤其在2018年下半年出現(xiàn)的企業(yè)用戶從公有云回遷的現(xiàn)象，更讓ECS獲得了大量的新用戶。

并且ECS從2016年開始，連續(xù)3年在Gartner“魔力象限”的報告中被評為分布式對象存儲的***。

生逢其時，做一個積極的參與者

“技術(shù)與產(chǎn)品一樣，螺旋上升發(fā)展的趨勢十分明顯。”

特別是在2014年，在看到企業(yè)數(shù)據(jù)量呈現(xiàn)大爆發(fā)的態(tài)勢之后，戴爾易安信認為企業(yè)云存儲的時代終于來了，滕昱和他的團隊也感受到了這一點，并堅信“公有云并不是企業(yè)開發(fā)的唯一出路”。

IDC的報告指出，公有云存儲在以下三個方面始終無法滿足企業(yè)用戶的需求。

一是安全性

核心數(shù)據(jù)存儲在云端，安全方面始終存在隱患，企業(yè)用戶有可能被公有云供應(yīng)商鎖定。

二是性能

針對企業(yè)用戶數(shù)字資產(chǎn)的全新要求，數(shù)據(jù)量數(shù)據(jù)集越來越大，對存儲帶寬和低延遲提出了新的要求。公有云要滿足這個需求，只能把企業(yè)所有數(shù)據(jù)集搬入云端，但是這樣一來，不僅不能滿足***個要求，而且?guī)淼谌齻€問題。

三是成本

對于越來越“精打細算”的企業(yè)用戶來說，公有云對象存儲的總體擁有成本相對私有云對象存儲來說過于昂貴。

其實，對于大部分企業(yè)用戶來說，他們需要的是，通過結(jié)合云技術(shù)和自有預(yù)算，來靈活計劃存儲方式的解決方案。

所以，混合云的方式為用戶帶來了靈活性，其工作負載應(yīng)用在私有云、公有云上，可以以自身實際需求來自由選擇。況且越來越多的企業(yè)用戶在有了多個生產(chǎn)中心和多個數(shù)據(jù)中心的需求后，自然會需要公有云存儲所沒有的企業(yè)級安全性與功能。

針對企業(yè)用戶的全新需求，針對不同應(yīng)用場景，需要提供不同的混合云與多云解決方案，混合云和多云是用戶的未來，也是戴爾易安信的未來。

隨著企業(yè)級用戶更為強調(diào)數(shù)字資產(chǎn)安全，從公有云回遷到私有云數(shù)據(jù)中心成為全球企業(yè)用戶云計算時代下一個有趣的趨勢。

從2018年對象存儲發(fā)展的趨勢來看，在私有云與公有云之間，企業(yè)用戶需要一個共同的S3 API接口，便于自身把控對象存儲的數(shù)據(jù)安全。于是，ECS成為了企業(yè)在進行內(nèi)部混合云部署時，在存儲橫向擴展上實現(xiàn)超大規(guī)模集群的優(yōu)選方案，也代表了基于云應(yīng)用和傳統(tǒng)工作負載的企業(yè)存儲基礎(chǔ)架構(gòu)的先進性和創(chuàng)新性。

但是，ECS對象存儲的性能如何滿足企業(yè)用戶更為苛刻的需求？

隨著NVMe-oF技術(shù)引入對象存儲領(lǐng)域，性能上的提升，自然也滿足了企業(yè)用戶在對象存儲方面的高性能低延時要求。

此外，在***ECS版本中，滕昱領(lǐng)導(dǎo)著中國研發(fā)團隊改寫了核心b-tree數(shù)據(jù)結(jié)構(gòu)，在小數(shù)據(jù)（<10KB）上***解決了存儲效率問題，解決了對象存儲的成本問題。

技術(shù)創(chuàng)新與應(yīng)用需求的契合剛剛好，從而讓企業(yè)用戶可以獲得更好的選擇。

ECS歷經(jīng)了多年的發(fā)展，從測試版到1.0版，2.0版，再到3.x版，就這樣迎來了一個更為廣闊的發(fā)展時代。

多云之下不止于ECS

但是，通向成功的路千萬條，滿足用戶需求的基石也就不止ECS一個。

“我熱愛這個戴爾易安信中國COE平臺，因為它可以支持我去嘗試新的技術(shù)帶來行業(yè)***，就像如果不嘗試Atmos在先，就沒有ECS收獲在后。”滕昱在談及這些年經(jīng)歷時，非常確定。

十二年對于任何科技公司來說，都是一個很長的時間。

而對于戴爾易安信來說，十二年唯一不變的是對滿足用戶需求方面的不懈追求。

但是，隨著用戶邁向云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)等領(lǐng)域的發(fā)展，存儲在技術(shù)、方案、產(chǎn)品創(chuàng)新上一直在變。

十二年前，存儲軟件對硬件的依賴性很強?，F(xiàn)在，存儲軟件與存儲硬件既可以集成一體化，也可以完全解耦合實現(xiàn)軟件定義的方式。針對用戶TCO整體的變化，戴爾易安信可以提供一體化的軟硬件方案，也可以提供基于開源或容器的創(chuàng)新方案。

企業(yè)用戶只需要關(guān)注數(shù)字資產(chǎn)的本身價值，針對數(shù)據(jù)的存儲、訪問、安全等方面，戴爾易安信可以基于用戶需求提供統(tǒng)一、高效、創(chuàng)新的數(shù)據(jù)管理與數(shù)據(jù)存儲整體方案。

值得關(guān)注的一個趨勢是，現(xiàn)在的企業(yè)用戶針對云原生的技術(shù)需求越來越多。

Pivotal Container Service (PKS) 針對云原生的用戶需求，在針對用戶存儲需求上可以提供更為敏捷的現(xiàn)代化方案。這都源自用戶自身開發(fā)方式、運維方式的轉(zhuǎn)變。

2018年末，AWS在也***次改變了它多年以來對于混合云的態(tài)度，聯(lián)合VMware推出了AWS outposts。

展望ECS的未來，戴爾易安信也會迅速跟上這一大趨勢，發(fā)布基于Kubernetes的全新架構(gòu)，這樣ECS的存儲引擎就會完全擺脫對于硬件限制，成為企業(yè)用戶的存儲核心部件。

從對象存儲到流式存儲，戴爾易安信早已開始研究和布局物聯(lián)網(wǎng)下的全球存儲技術(shù)領(lǐng)域的創(chuàng)新與走向。從2017年開始，在戴爾易安信中國COE的發(fā)展上，滕昱帶領(lǐng)著一個新的團隊，開始了全新的征程。

“工業(yè)物聯(lián)網(wǎng)、車聯(lián)網(wǎng)和實時欺詐風(fēng)控的需求正在飛速發(fā)展。越來越多的企業(yè)新應(yīng)用，需要的是快速響應(yīng)客戶需求，并同時學(xué)習(xí)和適應(yīng)不斷變化的行為模式。隨著5G 網(wǎng)絡(luò)、容器云、高性能存儲硬件水平的不斷提高，實時流處理正在擁有越來越廣泛的市場前景。”

計算是原生的流計算，存儲更需要原生的流存儲與之匹配。這一切必然驅(qū)動著開源分布式流存儲Pravega從誕生逐漸走向不久后的成熟。

Pravega取自梵語，意味“Good Speed”

Pravega采用了分層存儲架構(gòu)，在分布式文件、對象存儲基礎(chǔ)上，提供了一層針對Stream的抽象。實現(xiàn)了冷熱數(shù)據(jù)的分離，從而有效降低了數(shù)據(jù)存儲成本，并與以Flink為代表的新一代流處理大數(shù)據(jù)處理平臺無縫地***結(jié)合。如下圖：

在這樣一個混合云、多云的時代背景下，ECS、Pravega、PKS等與時俱進的創(chuàng)新產(chǎn)品和平臺，終究成為了云時代企業(yè)用戶的存儲基石。

在這十二年的職業(yè)生涯里，滕昱親身經(jīng)歷了戴爾與EMC并購并真正融合在了一起。當(dāng)初的堅定，也讓他在戴爾科技集團的整體發(fā)展中得到了更大發(fā)揮。

目前來看，作為戴爾科技集團的重要業(yè)務(wù)群之一，戴爾易安信擁有行業(yè)領(lǐng)先的融合基礎(chǔ)架構(gòu)、服務(wù)器、存儲和數(shù)據(jù)保護技術(shù)，助力企業(yè)實現(xiàn)現(xiàn)代化、自動化以及數(shù)據(jù)中心轉(zhuǎn)型，為通過建立混合云、開發(fā)云原生應(yīng)用和大數(shù)據(jù)解決方案實現(xiàn)業(yè)務(wù)轉(zhuǎn)型提供了值得信賴的基礎(chǔ)。

戴爾易安信為遍及180個國家不同規(guī)模的客戶提供服務(wù)—從全球財富500強至中小型企業(yè)—并為客戶提供業(yè)界全面的從客戶端到數(shù)據(jù)中心、再到云端的創(chuàng)新產(chǎn)品組合。

也就是說，滕昱團隊負責(zé)的ECS對象存儲和最近發(fā)力的流存儲，已經(jīng)成為了戴爾科技集團旗下戴爾易安信在面向用戶的混合云、多云，IoT等更為復(fù)雜的創(chuàng)新場景下重要的存儲選擇之一。

企業(yè)開發(fā)模式的整體思考

在混合云、多云之下，開源開發(fā)方式的發(fā)展，產(chǎn)品創(chuàng)新迭代的加快，這一切必然倒逼著企業(yè)開發(fā)模式必須不斷變化。

作為企業(yè)級存儲的重要代表，戴爾易安信研發(fā)如何去契合用戶互聯(lián)網(wǎng)與云需求下的快速發(fā)展，在技術(shù)迭代與敏捷開發(fā)上，如何做到企業(yè)級的嚴謹性與快速的創(chuàng)新性之間的平衡？

尤其在踏上開源流式數(shù)據(jù)存儲的新征程后，更需要對企業(yè)開發(fā)模式有著全面的整體思考。在滕昱看來，互聯(lián)網(wǎng)開發(fā)更看重to C的敏捷開發(fā)，強調(diào)個人用戶的體驗，以用戶試用來實現(xiàn)開發(fā)迭代的快速更新。但是，企業(yè)級的開發(fā)針對醫(yī)院、銀行、證券等行業(yè)用戶，強調(diào)新技術(shù)、功能、工具等開發(fā)必須具備安全、可靠、穩(wěn)定為前提，需要立足企業(yè)用戶具備足夠的承諾。

針對新技術(shù)的日新月異，企業(yè)級產(chǎn)品的開發(fā)也不得不面向敏捷開發(fā)，實現(xiàn)更多開發(fā)測試上的創(chuàng)新與進步。

[[261529]]

其實早在2011年，戴爾易安信中國COE開發(fā)團隊就開始全面轉(zhuǎn)向了使用開源開發(fā)工具，對于Pravega這樣的開源產(chǎn)品，則完全采用GitHub來管理托管開發(fā)的整套代碼和流程。

更重要的是，針對企業(yè)級產(chǎn)品的子模塊不絕對區(qū)分開發(fā)與測試工作，而是整合在一起成為一個工程師團隊，在開發(fā)過程中就強調(diào)及早測試和測試覆蓋率。在模糊了開發(fā)人員和測試人員分工之后，產(chǎn)品測試的人員也會涉及到對設(shè)計和代碼審核，更高質(zhì)量針對新功能設(shè)計測試用例，從代碼產(chǎn)生的***天就保證其質(zhì)量。

所以從戴爾易安信的企業(yè)開發(fā)模式來看，在小范圍上保持了敏捷開發(fā)的優(yōu)勢，在大范圍上保證了企業(yè)開發(fā)的質(zhì)量和整體的開發(fā)路線。實際上就是針對企業(yè)用戶組織需要的質(zhì)量、發(fā)布節(jié)奏和創(chuàng)新方面，可以用下面以“汽車、火車、輪船”三種開發(fā)模式來進行比喻。各有各的用處，也各有各的道理。

►►在“汽車開發(fā)模式”上，屬于匯總修補升級程序，要求以最短的時間，針對產(chǎn)品軟件打補丁、針對固件做優(yōu)化。目的是一個穩(wěn)定發(fā)行版本供所有用戶升級使用。

►►在“火車開發(fā)模式”上，主要針對新功能的發(fā)行發(fā)布，需要在每年當(dāng)中實現(xiàn)大的版本更新。

►►在“輪船開發(fā)模式”上，針對更為復(fù)雜的基礎(chǔ)架構(gòu)的改變，必然需要一個更長的時間與規(guī)劃。當(dāng)準備測試充分后，和“火車”計劃做一個同步。

然后具體到每個功能模塊，先做好本模塊的質(zhì)量控制，等達到設(shè)定的質(zhì)量標(biāo)準以后，由“火車”車長根據(jù)發(fā)布計劃去選擇在下一次“發(fā)車”時候可以搭上火車的功能。然后再針對性地做更大范圍內(nèi)的集成測試和“混亂”（Chaos Monkey）測試。

對于企業(yè)存儲而言，隨著商業(yè)模式的變化，存儲也在發(fā)生新的訪問方式變化。在分布式文件和對象存儲上，一旦融入了對流式存儲的創(chuàng)新，最終將成就一個更為***的存儲組合。未來的數(shù)據(jù)存儲定會聚焦支持云原生、容器、虛擬化等新需求，支持企業(yè)級的使用需求，支持混合云、多云的需求，支持實時數(shù)據(jù)、流式數(shù)據(jù)、物聯(lián)網(wǎng)數(shù)據(jù)爆發(fā)式發(fā)展的需求。

從對象存儲到流式存儲，滕昱帶領(lǐng)著研發(fā)團隊，讓我們看到了一如既往的堅持。滿足用戶需求變化，追求不斷的技術(shù)革新，結(jié)果導(dǎo)向的確立，就事先明確了技術(shù)創(chuàng)新可落地、可實現(xiàn)的價值。

追求卓越，是一種境界，更是一種價值觀。十二年的堅持，滕昱也讓我們看到了追求卓越的真正價值。十二年的堅持是一種力量，更是一種品質(zhì)與傳承。

因此，未來依然屬于“激情、正直、創(chuàng)新，強調(diào)團隊合作與結(jié)果導(dǎo)向”的戴爾易安信中國COE研發(fā)團隊。

后  記

滕昱已在戴爾易安信工作滿十二年，經(jīng)歷了企業(yè)云存儲的起步，彷徨和尋找突破點，直至現(xiàn)在的混合云多云趨勢下的大爆發(fā)的時代變遷。他的職業(yè)生涯和業(yè)界的風(fēng)云變幻緊密聯(lián)系，也和戴爾易安信的云存儲業(yè)務(wù)密不可分。

[[261530]]

因此我們特地邀請他回顧了這十二年經(jīng)歷，希望可以帶給存儲行業(yè)研發(fā)人更多的思考。

良禽擇木而棲，士為知己而搏

目前，戴爾易安信中國COE在北京、成都、上海設(shè)立了三個研發(fā)中心，各自有所側(cè)重方向，研發(fā)人員超過了二千人。據(jù)可靠消息透露，基于2019年的發(fā)展需求，對于有志于從事云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)等相關(guān)數(shù)據(jù)管理、數(shù)據(jù)存儲領(lǐng)域研發(fā)工作的朋友，COE還有大量***職位放出，有意者請點擊下方二維碼查看詳情。  

良禽擇木而棲，士為知己而搏。加入戴爾易安信中國COE，您的成功或?qū)倪@里開始。

往期回顧

網(wǎng)線千萬根，輕松就一條
一直蟬聯(lián)數(shù)據(jù)保護冠軍的秘密
當(dāng)紐約出租車數(shù)據(jù)交給Pravega分析