【報告觀點】2018年大數(shù)據(jù)領(lǐng)域的十大趨勢
譯文【51CTO.com快譯】大數(shù)據(jù)分析(BDA)不再是最新的熱門IT趨勢。相反，如今它是大多數(shù)公司開展業(yè)務(wù)的一個必要部分。
用IDC分析和信息管理集團(tuán)副總裁Dan Vesset的話來說，“在采用階段苦熬多年后，大數(shù)據(jù)和業(yè)務(wù)分析解決方案終于進(jìn)入主流。作為決策支持和決策自動化的賦能者，BDA現(xiàn)在備受企業(yè)高管的關(guān)注。這類解決方案也是在全球范圍內(nèi)支持各行業(yè)數(shù)字化轉(zhuǎn)型和業(yè)務(wù)流程的主要支柱之一。”
他公司預(yù)測，到2020年，企業(yè)BDA支出將以11.9%的年復(fù)合增長率(CAGR)增長，到時收入將超過2100億美元。
然而，隨著大數(shù)據(jù)分析領(lǐng)域日趨成熟，企業(yè)在該技術(shù)方面的經(jīng)驗也日趨豐富。它們在尋找新的工具和部署模式;雖然它們克服了處理大數(shù)據(jù)方面的一些挑戰(zhàn)，但其他挑戰(zhàn)仍然困擾著分析項目。
為準(zhǔn)確評估大數(shù)據(jù)實踐在發(fā)生怎樣的變化、哪些方面又沒有變化，商業(yè)智能廠商AtScale最近與Cloudera、Hortonworks、MapR、Tableau、Apache軟件基金會和ODPi(Linux基金會旗下的項目)合作，共同開展了一項全球調(diào)查。在三年期間，它們收集到了來自各行各業(yè)的5593名企業(yè)架構(gòu)師、大數(shù)據(jù)領(lǐng)導(dǎo)人和其他IT專業(yè)人員的回復(fù)。因此出爐的《2018年大數(shù)據(jù)成熟度調(diào)查報告》包含這十大要點，著重表明了大數(shù)據(jù)領(lǐng)域的幾大趨勢。
1. 大多數(shù)企業(yè)對自己的大數(shù)據(jù)能力過于自信。
企業(yè)高估了其在大數(shù)據(jù)分析方面的表現(xiàn)。在2018年的調(diào)查對象中，78%表示會將其企業(yè)的大數(shù)據(jù)成熟度評為“中”或“高”。但是當(dāng)AtScale獨立評估企業(yè)時，只有12%符合高成熟度方面的標(biāo)準(zhǔn)。雖然這比2016年處于高成熟度的企業(yè)所占的比例：8%有所提高，但這表明企業(yè)仍有很大的改進(jìn)空間。
也許那些過于自信的大數(shù)據(jù)專業(yè)人員應(yīng)該更關(guān)注Gartner在大數(shù)據(jù)項目失敗率方面的預(yù)測。2016年，該調(diào)研公司預(yù)測，60%的大數(shù)據(jù)項目會失敗。不過在2017年底，Gartner分析師Nick Heudecker發(fā)推文：“我們太保守了，失敗率接近85%。問題不在于技術(shù)。”
2. 55%的企業(yè)仍設(shè)有孤立的分析團(tuán)隊。
如果正如Heudecker所說的那樣，大數(shù)據(jù)項目的問題不在于技術(shù)，哪在于什么呢?
大數(shù)據(jù)失敗的一方面原因可能來自組織挑戰(zhàn)。AtScale調(diào)查發(fā)現(xiàn)，55%的企業(yè)仍然設(shè)立孤立、分散的分析團(tuán)隊。只有34%的公司遵循這個最佳實踐：設(shè)立卓越中心或其他集中式數(shù)據(jù)科學(xué)團(tuán)隊。
一些行業(yè)在這方面比其他行業(yè)做得更好。公用事業(yè)公司和互聯(lián)網(wǎng)公司最有可能設(shè)有集中式團(tuán)隊，電信和金融服務(wù)公司處于落后，通常設(shè)有多個孤立的團(tuán)隊。
3. 77%的企業(yè)預(yù)計將來會將云應(yīng)用于大數(shù)據(jù)。
AtScale調(diào)查還顯示了一種明確的觀點：大多數(shù)大數(shù)據(jù)分析有一天會在云端進(jìn)行。在2018年，77%的調(diào)查對象表示，他們的部分或全部大數(shù)據(jù)最終會部署在云端，而2017年72%的調(diào)查對象表達(dá)了同樣的觀點。
分析師們似乎一致認(rèn)為大數(shù)據(jù)在轉(zhuǎn)向云。弗雷斯特研究公司的副總裁兼首席分析師Brian Hopkins在博文中寫道：“五年后，你將在公共云上使用Insight PaaS處理大數(shù)據(jù)。”他補(bǔ)充道，云數(shù)據(jù)支出的增幅比內(nèi)部部署大數(shù)據(jù)軟件支出快7.5倍。原因何在?云大數(shù)據(jù)成本在急劇下降，而人工智能技術(shù)一直讓這些服務(wù)日臻完善。
4. 今天41%的企業(yè)未將云應(yīng)用于大數(shù)據(jù)。
云可能是未來，但今天并未普及開來。在AtScale調(diào)查中，41%的調(diào)查對象表示其企業(yè)今天在云端沒有大數(shù)據(jù)。此外，28%的企業(yè)將不到一半的大數(shù)據(jù)放在云端，15%的企業(yè)將一半以上的大數(shù)據(jù)放在云端，16%的企業(yè)將大數(shù)據(jù)全部放在云端。
實際上，許多大數(shù)據(jù)專業(yè)人員還沒有確信云是大數(shù)據(jù)的正確部署方法。被問及想為大數(shù)據(jù)項目選擇哪種部署類型時，近一半(47%)選擇了非云，40%選擇了云部署，13%則懸而未決。
5. PowerBI越來越受歡迎。
AtScale調(diào)查還發(fā)現(xiàn)各種商業(yè)智能(BI)解決方案的人氣發(fā)生了變化。兩大工具：Tableau和微軟Excel自2016年以來一直保持超高的人氣。2018年的調(diào)查對象中63%使用Tableau，50%使用Excel。
然而，名單上的第三位出現(xiàn)了戲劇性的轉(zhuǎn)變。在2016年和2017年，Business Objects排在第三位。但在2018年，Business Objects跌到了第七位。微軟PowerBI在最近的調(diào)查中名列第三，而在2017年排名第七，2016年沒有上榜。調(diào)查對象中25%表示在使用PowerBI，超過了Qlik(23%)、IBM Cognos(19%)、Microstrategy(19%)和SAP/Business Objects(18%)等解決方案。報告作者因此得出了結(jié)論：“微軟商業(yè)智能(PowerBI和Excel)在這個市場的影響力最大。”
6. 95%的企業(yè)將來會保持或增加大數(shù)據(jù)的使用。
95%的調(diào)查對象表示，其公司計劃在未來三個月內(nèi)保持或增加大數(shù)據(jù)的使用，5%的調(diào)查對象表示其公司會減少大數(shù)據(jù)的使用，這不足為奇，但仍值得注意。
這與Gartner的觀點一致，去年Gartner建議道：“隨著數(shù)據(jù)和分析得到更廣泛的采用，業(yè)務(wù)增長方面的潛力其實是指數(shù)級的，而不僅僅是累積性的。今天沒有行動起來的企業(yè)不僅在2017年受影響，還會大大限制其在2018年及以后的增長潛力，因為洞察力、響應(yīng)速度和效率同提升后帶來的回報越來越高。”
7.企業(yè)仍然找不到擁有大數(shù)據(jù)技能的專業(yè)人員。
連續(xù)三年，找到擁有相應(yīng)大數(shù)據(jù)技能的員工一直是AtScale的調(diào)查對象提到的頭號挑戰(zhàn)。現(xiàn)在許多不同的企業(yè)都開設(shè)數(shù)據(jù)科學(xué)和大數(shù)據(jù)方面的課程，還是無法足夠快地培訓(xùn)新員工以跟上需求。因而，大數(shù)據(jù)崗位的薪水空前高漲。
一段時間以來，缺乏合格的專業(yè)人員似乎促使企業(yè)選擇擁有自助服務(wù)功能的大數(shù)據(jù)解決方案，以便其他業(yè)務(wù)人員使用分析工具。然而，雖然自助服務(wù)大數(shù)據(jù)的占比在2017年攀升至47%，但2018年實際下降至41%。
8.數(shù)據(jù)治理在成為大問題。
目前大家都關(guān)注的另一個大數(shù)據(jù)問題是治理，這是2018年的第二大常見問題。形勢顯然發(fā)生了重大轉(zhuǎn)變，因為早在2016年，治理是排名第五的常見問題，即使在2017年，也排名第三。管理和安全在2016年分別是排名第二和第三的常見問題，2018年跌至第五和第四。
人們越來越關(guān)注治理，一方面原因可能是Facebook及其他公司經(jīng)常爆出用戶隱私丑聞，以及政府監(jiān)管越來越嚴(yán)。另一方面歐盟的《通用數(shù)據(jù)保護(hù)條例》(GDPR)于下個月生效，許多企業(yè)在競相確保符合法規(guī)。
9.只有19%的企業(yè)使用大數(shù)據(jù)系統(tǒng)取代數(shù)據(jù)倉庫。
盡管許多企業(yè)欣然接受大數(shù)據(jù)分析，但它們不一定擯棄傳統(tǒng)的數(shù)據(jù)倉庫及其他技術(shù)。實際上，許多企業(yè)在開發(fā)混合架構(gòu)，這種架構(gòu)包括內(nèi)部數(shù)據(jù)倉庫、基于Hadoop及相關(guān)技術(shù)而建立的數(shù)據(jù)湖以及基于云的大數(shù)據(jù)服務(wù)。在AtScale調(diào)查中，只有19%的調(diào)查對象表示計劃用新的大數(shù)據(jù)工具完全取代舊的數(shù)據(jù)解決方案。42%的調(diào)查對象表示，新的大數(shù)據(jù)工具在補(bǔ)充原有的解決方案;39%表示在取代一些工具，并在補(bǔ)充其他工具。
10. 66%的企業(yè)認(rèn)為，大數(shù)據(jù)是戰(zhàn)略性或改變游戲規(guī)則的。
被問及大數(shù)據(jù)在企業(yè)中扮演的角色時，約三分之二(66%)的調(diào)查對象表示他們認(rèn)為大數(shù)據(jù)是“戰(zhàn)略性”或“改變游戲規(guī)則的”。只有17%表示大數(shù)據(jù)在其公司仍然是“實驗性”的，另有17%稱大數(shù)據(jù)項目是“戰(zhàn)術(shù)性”的。
大數(shù)據(jù)方面的這種觀點清楚地表明，大數(shù)據(jù)是不會很快消失的一個趨勢。Gartner副總裁兼杰出分析師Ted Friedman認(rèn)為，隨著更多的企業(yè)開始將大數(shù)據(jù)視為戰(zhàn)略性，會出現(xiàn)這三大預(yù)測：
- “數(shù)據(jù)和分析將推動現(xiàn)代業(yè)務(wù)運(yùn)營，而不是僅僅體現(xiàn)其表現(xiàn)。”
- “企業(yè)對于數(shù)據(jù)和分析將采取全面的方法。企業(yè)將構(gòu)建端到端架構(gòu)，以便從企業(yè)核心到企業(yè)邊緣都實行數(shù)據(jù)管理和分析。”
- “高管們將把數(shù)據(jù)和分析納入業(yè)務(wù)戰(zhàn)略中，這讓數(shù)據(jù)和分析專業(yè)人員得以扮演新角色，推動業(yè)務(wù)增長。”
原文標(biāo)題：10 Top Big Data Trends for 2018，作者：Cynthia Harvey
【51CTO譯稿，合作站點轉(zhuǎn)載請注明原文譯者和出處為51CTO.com】
