Hadoop可能已經(jīng)達(dá)到預(yù)期的成熟度
五年前,Hadoop用可以解決所有大數(shù)據(jù)難題的身份殺入主流市場。如今塵埃已經(jīng)落定,現(xiàn)在是時候?qū)adoop展開更切合實際的評估了。
我們現(xiàn)在正處于21世紀(jì)第二個十年的正中間。當(dāng)大數(shù)據(jù)潮流從五年前開始興起時,Hadoop將***未來這一看法得到了普遍認(rèn)可。Hadoop市場從那時開始的增長顯示,這一共識并沒有被削弱。持續(xù)不懈的宣傳至少為Hadoop的部署與創(chuàng)新打下了良好的基礎(chǔ)。
如果所有人都非常清楚Hadoop的重要性,那么我們是否還有必要在大數(shù)據(jù)領(lǐng)域中繼續(xù)宣傳Hadoop將是“下一個大事件”呢?Hadoop是否早已過了其發(fā)展的拐點,其成熟的時間點是否正在快速到來?當(dāng)所有的成熟標(biāo)志在細(xì)分市場中出現(xiàn)后,我們應(yīng)該降低它們的市場營銷力度。在大數(shù)據(jù)分析市場的份額方面,Hadoop目前可能已經(jīng)達(dá)到了之前的預(yù)期(盡管整個市場可能還會持續(xù)增長)。
為了確定Hadoop是否已經(jīng)到達(dá)了這一拐點,讓我們來評估一下Hadoop目前已經(jīng)發(fā)展到了什么程度,以及未來可能會如何發(fā)展。
創(chuàng)業(yè)活動是成長型市場的明顯標(biāo)志。創(chuàng)業(yè)活動的下降也是成熟的強(qiáng)烈信號。在經(jīng)歷了初期的創(chuàng)業(yè)活動井噴后,Hadoop平臺、工具和應(yīng)用廠商已經(jīng)被人們所熟悉。例如,在近期《InformationWeek》的市場概述中被提及的每一家廠商都是在三、四年前加入這一領(lǐng)域的,當(dāng)時我還是市場研究機(jī)構(gòu)Forrester的Hadoop分析師。這是成熟市場的一個顯著標(biāo)志。
Hadoop的另一個成熟標(biāo)志是,其主要的需求推動因素實際上一直保持著穩(wěn)定,這反映出其市場一直沒有變化。市場調(diào)查的結(jié)果也反映出,用戶部署Hadoop主要是用于非結(jié)構(gòu)化數(shù)據(jù)分析、預(yù)測性客戶分析、情感分析等工作。這與我在2011年對Hadoop市場所做的初步研究沒有什么明顯的不同。
細(xì)分市場成熟的另一個標(biāo)志還在于,整個行業(yè)在年復(fù)一年地重復(fù)相同的主題,并將其視為最有效的解決方案。例如,大數(shù)據(jù)博客仍然在討論“SQL是否在Hadoop生態(tài)圈中擁有未來?”等早有定論的問題。答案是肯定的,證據(jù)是上述調(diào)查中所羅列的每家主要廠商都提供了一系列供備選的SQL訪問/分析選項。
關(guān)于“重復(fù)相同的舊主題”這一趨勢,這也是Hadoop市場范圍不清晰的毛病。我在2014年4月份曾在一篇專欄文章中指出,Hadoop技術(shù)仍然沒有明確的界限(相較于NoSQL,以及其他的大數(shù)據(jù)方案),而這一點我在三年前供職于Forrester時就已經(jīng)多次提到過了。時至今日,Hadoop業(yè)界的“身份危機(jī)”在很大程度上源自其沒有實現(xiàn)標(biāo)準(zhǔn)化,而且沒有統(tǒng)一Hadoop是什么,以及未來的發(fā)展前景。
如果認(rèn)真審視目前Apache軟件基金會給Hadoop作出的定義,我們就會發(fā)現(xiàn),該項目仍然像一個大雜燴,而非一個明確的架構(gòu)。例如,最近加入到Hadoop中的Spark看起來仍然太過隨意,且其中仍然存在著與Cassandra千絲萬縷的聯(lián)系。業(yè)界還沒有人真正將Spark作為Hadoop的競爭對手,而非其組成部分。與之形成鮮明對比的是,Cassandra并不是最熱門的開源實時大數(shù)據(jù)社區(qū),其持續(xù)增長的勢頭似乎也已經(jīng)開始顯著衰退。
當(dāng)討論越來越多地集中在主流用戶中微不足道的部署率時(+本站微信networkworldweixin),那么就意味著,這一技術(shù)的目標(biāo)市場已經(jīng)開始飽和。以下才是這份調(diào)查報告的核心內(nèi)容:
《InformationWeek》的數(shù)據(jù)表明,目前列車尚沒有真正駛離車站:只有4%的企業(yè)在廣泛使用Hadoop,而18%的企業(yè)表示,僅在有限的范圍內(nèi)使用了Hadoop……與2014年3%的企業(yè)開始廣泛使用和12%的企業(yè)僅在有限的范圍內(nèi)使用Hadoop相比,2015年這兩項數(shù)據(jù)均有所提升。另有20%企業(yè)客戶有使用Hadoop的計劃,不過仍有58%的受訪企業(yè)表示,尚未計劃使用Hadoop。
如果大家擁有分析行業(yè)的從業(yè)經(jīng)歷,就會發(fā)現(xiàn)這樣的狀況有些似曾相識的感覺。二十多年前,BI(商業(yè)智能)市場曾經(jīng)作為獨立業(yè)務(wù)擁有自己的一片天地,但其在主流知識型員工中的采用率卻一直表現(xiàn)低迷。
也許BI或Hadoop,以及其他大數(shù)據(jù)技術(shù)項目,都注定無法像智能手機(jī)那樣被市場所廣泛接受。但這并不意味著Hadoop無法在被明確定義的特定市場之內(nèi),發(fā)展成為一個極為重要、且盈利可觀的細(xì)分市場。畢竟沒有什么東西能夠阻礙一個成年人在步入老年的過程中,逐漸積累到財富與名望。