Hadoop在成熟程度方面可能已達到極限水平
譯文目前我們正處于二十一世紀第二個十年的中間階段。在關于大數據的狂熱炒作于五年前剛剛興起之時,人們達成了Hadoop將在未來成為普及性方案的廣泛共識。然而隨著其后Hadoop市場的不斷發(fā)展,事實證明了這種預期恐怕并不準確。從Hadoop市場的應用及創(chuàng)新層面來看,這種鋪天蓋地的宣傳已經在一定程度上逐漸沉寂了下來。
鑒于大家對于Hadoop的重要性保持著高度的認同感,我們是否有必要在大數據業(yè)界繼續(xù)不斷擂動Hadoop將成為“下一波浪潮”這面戰(zhàn)鼓?Hadoop是否早已邁過了其歷史性發(fā)展拐點——其成熟速度又是否有些過快?當某種業(yè)務領域在各個方面體現(xiàn)出成熟的跡象之后,市場的發(fā)展態(tài)勢也將很快趨于平衡。而Hadoop的“下一波浪潮”恐怕也將止步于目前的水平,這意味著其在大數據分析市場上的份額將陷入停滯(與此同時,整體市場規(guī)模還將繼續(xù)保持發(fā)展)。
要確認Hadoop是否已經達到了這一拐點,我們需要首先回顧其過往發(fā)展歷程及其未來可能迎來怎樣的演變前景。
創(chuàng)業(yè)性活動是驗證市場是否處于增長態(tài)勢的一項明確指標,而這一指標的衰退則是一種強烈的信號、昭示相關市場已然步入成熟。在本個十年的早期階段,一場規(guī)??捎^的創(chuàng)業(yè)風暴席卷而來,但從目前的情況看Hadoop平臺、工具以及應用程序供應商都已經在市場上找到了較為穩(wěn)定的定位。舉例來說,根據InformationWeek新近發(fā)布的市場調查報告中,每一家供應商都已經在市場上運作了三到四年時間——那時我本人還是位年輕的Forrester Hadoop分析師。而這正是市場趨于成熟的顯著標志之一。
Hadoop趨于成熟的另一種表現(xiàn)在于,主要需求推動力因素已經不再隨時間推移而持續(xù)變化,這也意味著其利基指向一直針對同樣的客戶需求。不出所料,這篇調查報告中再次喋喋不休地通過調查數字證明了用戶主要利用Hadoop進行非結構化數據分析、客戶預測分析以及情感分析等工作。與我在2011年對尚處于起步階段的Hadoop市場作出的研究結果相比較,目前的情況似乎沒有出現(xiàn)任何不同之處。
技術類別趨于成熟的另一大主要跡象在于,相關行業(yè)在多年當中始終不斷重復同樣的發(fā)展方向,例如通過一套解決方案帶來***價值吸引力的功能增長點。舉例來說,大數據博客仍然在以令人大類的爭論探討一個實際上已經得到解答的問題:SQL在Hadoop生態(tài)系統(tǒng)當中是否仍能繼續(xù)存在下去?;卮鸷翢o疑問會是肯定的,因為調查報告所羅列的各家供應商針對SQL訪問/分析選項所給出的替代方案已經充分證明了這一點。
與“不斷重復同樣的陳舊主題”類似,Hadoop技術目前的市場定位仍然顯得比較模糊。正如我在去年四月的Dataversity專欄中所指出,Hadoop技術仍然不具備明確的界限(相較于NoSQL以及其它大數據方案),而這一點我在三年前供職于Forrester公司時就已經多次提到過了。時至今日,Hadoop業(yè)界的“身份危機”在很大程度上源自其仍然缺乏一套通行標準,而且始終無法給出一套Hadoop即將且能夠實現(xiàn)的明確而統(tǒng)一的發(fā)展前景。
如果大家認真審視目前Apache軟件基金會給Hadoop作出的定義,就會發(fā)現(xiàn)該項目仍然屬于一種包羅萬象而非指向明確的架構概念。舉例來說,最近加入到Hadoop當中的Spark看起來仍然太過隨意、而且其中仍然存在著與Cassandra的千絲萬縷的聯(lián)系。業(yè)界中還沒有人真正將Spark作為Hadoop的競爭對手而非組成部分。相比之下,Cassandra仍然算不上一套最熱門的開源、實時、大數據社區(qū),而其持續(xù)增長的勢頭似乎也已經開始顯著衰退。
與此同時,當關于某種技術體系的討論越來越多地集中到其在主流用戶當中微不足道的占有比例時,這就代表著其目標市場已經很難跨越式打開局面。而這也正是這份調查報告所提出的研究結論及主體思路:
InformationWeek的數據表明,目前列車尚沒有真正駛離車站:只有4%的企業(yè)客戶廣泛采用Hadoop項目,而18%的企業(yè)客戶指出僅在有限的范圍內采用Hadoop項目……這兩項結果高于去年調查報告所顯示的3%已經使用與12%局面采用的比例。另有20%企業(yè)客戶有計劃使用Hadoop技術,不過仍有58%的受訪企業(yè)表示尚未考慮過將Hadoop引入業(yè)務環(huán)境。
如果大家在分析業(yè)界擁有幾年的從業(yè)經歷,就會發(fā)現(xiàn)這樣的狀況很有些似曾相識的意味。二十多年之前,商務智能市場曾經作為獨立業(yè)務擁有自己的一片天地,但其在主流知識型員工中的采納比例卻一直表現(xiàn)低迷。也許商務智能——或者Hadoop乃至其它大數據技術項目——都注定無法像智能手機那樣被市場所廣泛接受。
但這并不意味著Hadoop無法在其充分定義的利基領域之內發(fā)展成一大影響可觀且規(guī)模甚巨的業(yè)務類型。畢竟只要時間充裕,即使步入了中年、Hadoop也仍然能夠在滿頭白發(fā)之前贏取自己應得的財富與名望。
原文標題:Hadoop is probably as mature as it's going to get