2014年將成為大數(shù)據(jù)之年
《哈佛商業(yè)評論》將其9月刊的所有版面都用在了大數(shù)據(jù)上,并將重點(diǎn)放在了Hadoop上。文中認(rèn)為,數(shù)據(jù)科學(xué)家將成為有前途的職業(yè),而這些數(shù)據(jù)科學(xué)家也將成為建議公司如何使用大數(shù)據(jù)技術(shù)的專家。
與許多開始創(chuàng)業(yè)并領(lǐng)導(dǎo)公司不斷發(fā)展壯大的人一樣,我也經(jīng)常閱讀《哈佛商業(yè)評論》。我沒有商科學(xué)位。由于強(qiáng)迫性閱讀障礙(我認(rèn)為這是早發(fā)性老花眼引起的,得了這種眼科疾病意味著你真的已經(jīng)老了)的原故,我會對從觀察對象那里了解到的東西進(jìn)行仔細(xì)研究。對于《哈佛商業(yè)評論》來說,對技術(shù)的發(fā)展進(jìn)行前瞻很不尋常——我很少看到他們會刊發(fā)一些關(guān)于Hadoop這類相對較新的開源項目的文章。
Gartner預(yù)測大數(shù)據(jù)在2013年將帶來了340億美元的IT開支,預(yù)計到2018年這一數(shù)據(jù)將增長三倍。我們在今年還發(fā)現(xiàn)美國國家安全局(NSA)已經(jīng)成為了大數(shù)據(jù)技術(shù)的主要使用者。政府可能無法創(chuàng)建一個允許我們大家購買健康保險的網(wǎng)站,但是在創(chuàng)建一個大型國內(nèi)監(jiān)視網(wǎng)絡(luò)方面,他們確實(shí)做到了。
我們還看到10gen公司將他們的名字更名為MongoDB,并獲得了12億美元的估值,以及突破9位數(shù)資金,這意味著他們可能將進(jìn)行IPO(首次公開募股)而不是被并購。目前大數(shù)據(jù)領(lǐng)域內(nèi)有著充足的資金。其中,Hortonworks獲得了5000萬美元的融資、DataStax獲得了4500萬美元融資、Couchbase獲得了2500萬美元融資。
在過去幾年,我們還看到了許多“不得不”開發(fā)和部署的技術(shù)——Facebook、雅虎、推特和LinkedIn等公司遇到了許多以前未曾預(yù)見到的數(shù)據(jù)與使用問題。盡管這些公司在數(shù)據(jù)和并發(fā)使用量方面甚至超過了某些國家,但是他們常常被視為一時的時尚或是被非關(guān)鍵數(shù)據(jù)所包圍,難以成為主流公司的榜樣。
盡管如此,我們還是看到許多相當(dāng)保守的客戶也已經(jīng)轉(zhuǎn)變態(tài)度,開始部署NoSQL技術(shù),尤其是MongoDB技術(shù)。在2013年,“日志分析”成為了Hadoop的殺手級應(yīng)用和今年的試點(diǎn)項目。同時我們也開始看到許多更為嚴(yán)肅的想法被應(yīng)用到解決方案中和相關(guān)問題研究當(dāng)中。
這一現(xiàn)象并不是地區(qū)性的而是全球性的。在巴西,鍵值存儲已經(jīng)被部署,以用于提升一個大型數(shù)據(jù)項目中的吞吐量。解決社交媒體和娛樂中出現(xiàn)的問題可能只是大數(shù)據(jù)解決方案的一個開始,目前它們正在向教育、醫(yī)療保健和金融等領(lǐng)域拓展。
此外,我們還發(fā)現(xiàn)這一發(fā)展勢頭在去年非常強(qiáng)勁。在2014年,如果甲骨文公司銷售代表沒有轉(zhuǎn)行成為大數(shù)據(jù)廠商代表,那么即便是更為保守的IT部門也將不再愿意與當(dāng)?shù)氐募坠俏墓句N售代表展開溝通。
(注:本文作者為Andrew Oliver,在InfoWorld.com網(wǎng)站開設(shè)有Strategic Developer博客)