WOT講師張溪夢:拿什么拯救你,疲于污水處理的數(shù)據(jù)分析師
原創(chuàng)大數(shù)據(jù)時代,數(shù)據(jù)成為企業(yè)決策最為重要的參考之一。盡管數(shù)據(jù)源的生成量正以幾何倍數(shù)的速度增加,盡管各行各業(yè)都在標榜自己生產(chǎn)了多少有價值的數(shù)據(jù),但究竟哪些數(shù)據(jù)可以為企業(yè)所用,如何基于高效的數(shù)據(jù)分析創(chuàng)造商業(yè)價值,仍是非常具有挑戰(zhàn)性的話題。
對于以上問題,【W(wǎng)OT2015"互聯(lián)網(wǎng)+"時代大數(shù)據(jù)技術峰會】特邀講師、GrowingIO創(chuàng)始人張溪夢分別基于企業(yè)運營需求及技術發(fā)展角度進行了分析,下面就讓我們一起學習,最新一代的數(shù)據(jù)分析技術將如何幫助企業(yè)最大限度發(fā)揮數(shù)據(jù)運營效率。
【W(wǎng)OT2015"互聯(lián)網(wǎng)+"時代大數(shù)據(jù)技術峰會】特邀嘉賓 張溪夢
張溪夢,GrowingIO創(chuàng)始人、CEO,前LinkedIn分析部高級總監(jiān)。美國Data Science Central評選其為"世界前十位前沿數(shù)據(jù)科學家",前LinkedIn美國商業(yè)分析部高級總監(jiān),親手建立了LinkedIn將近90人商業(yè)數(shù)據(jù)分析和數(shù)據(jù)科學團隊,支撐了LinkedIn公司所有與營收相關業(yè)務的高速增長。 2015年5月,創(chuàng)立新一代網(wǎng)站和移動端數(shù)據(jù)分析平臺GrowingIO,創(chuàng)始團隊來自LinkedIn 、eBay 、Coursera、亞信等國內(nèi)外頂級互聯(lián)網(wǎng)及數(shù)據(jù)公司,具有強大的商業(yè)分析、數(shù)據(jù)產(chǎn)品、企業(yè)軟件研發(fā)以及機器學習等專業(yè)背景、先進的數(shù)據(jù)分析技術和豐富的實戰(zhàn)經(jīng)驗。
數(shù)據(jù)分析創(chuàng)造商業(yè)價值
現(xiàn)在,幾乎再沒有人會質(zhì)疑數(shù)據(jù)驅(qū)動對于企業(yè)運營和商業(yè)價值的重要性,工業(yè)4.0都將大數(shù)據(jù)的存儲、剖析、安全保障和數(shù)據(jù)價值的呈現(xiàn)和利用,列為未來三大核心訴求之一。
為什么數(shù)據(jù)化運營如此重要?因為基于證據(jù)的決策更可靠。依照數(shù)據(jù)分析得到的結論,企業(yè)可以快速發(fā)現(xiàn)問題、判斷趨勢、有效行動,從而指導公司未來的發(fā)展方向。
張溪夢認為,企業(yè)中的每一位員工都應該參與到數(shù)據(jù)化運營的工作中來。數(shù)據(jù)可以直觀的將一些原本無形的標準進行量化,從而幫助員工發(fā)現(xiàn)自己的工作與業(yè)務結果之間的聯(lián)系,有針對性的開展工作。
可讓這個想法落地并不簡單,因為這不僅僅是收集收據(jù)、定期查看而已。培養(yǎng)專業(yè)人才、在更短的時間內(nèi)處理更多的數(shù)據(jù)、保證處理數(shù)據(jù)的質(zhì)量和性能、讓合適的人員使用合適的工具……有太多太多困難都在拖慢企業(yè)數(shù)據(jù)化運營的進程。
企業(yè)數(shù)據(jù)分析流程的90%耗費于初級階段
互聯(lián)網(wǎng)技術的發(fā)展為企業(yè)加速創(chuàng)新提供前所未有的機遇。在快速變化的商業(yè)格局下,企業(yè)是否有迅速做出決策的能力,成為影響未來生存和發(fā)展的關鍵。
然而現(xiàn)實往往是殘酷而無奈的。張溪夢告訴我們:“去年美國某研究機構做過一份關于企業(yè)數(shù)據(jù)分析流程的調(diào)查,結果顯示,僅僅是在數(shù)據(jù)收集階段,就要花費5個星期的時間”。
造成這種局面的關鍵因素之一,是目前的大數(shù)據(jù)分析需要專業(yè)技術人員同時具備編程和數(shù)據(jù)分析兩種能力。張溪夢將數(shù)據(jù)分析的流程形象地比喻為將一條被污染的河水變清的過程。我們收集的大量數(shù)據(jù)就像流入源頭的污水,需要人力進行各種監(jiān)控,然后放入一個池子里進行沉淀。之后則要開展各種清洗、聚合、再清洗、再消毒,再傳輸?shù)三嫶蟆⒎彪s的工作,這個過程占用了數(shù)據(jù)工程和分析師幾乎90%的時間。企業(yè)急需更加先進的技術和更具指導性的方法論,來提升數(shù)據(jù)化運營的效率。
“自動化”是下一代數(shù)據(jù)分析技術的核心
要想突破目前企業(yè)數(shù)據(jù)分析中的瓶頸,關鍵要對現(xiàn)有的業(yè)務的數(shù)據(jù)分析流程進行大規(guī)模的簡化,將人類的智慧集中到最能夠創(chuàng)造商業(yè)價值的環(huán)節(jié)中。
張夢溪認為,取代今天這種功能化的數(shù)據(jù)分析的下一代數(shù)據(jù)分析技術,一定是基于以自動化為核心的一套框架。這需要企業(yè)對沉淀多年的傳統(tǒng)技術框架進行革新。過去,為了應對基礎設施在計算、存儲等能力上的缺陷,往往需要將來源不同、類型不同的數(shù)據(jù)制成多維度的各種表格,來達到減少存儲量的目的,這會大大拖慢企業(yè)數(shù)據(jù)處理效率。
對于未來數(shù)據(jù)分析技術趨勢,張溪夢主要提到以下兩個方面:
流式處理框架:這是企業(yè)實現(xiàn)數(shù)據(jù)自動化的核心技術。流處理的優(yōu)勢是可以任意數(shù)據(jù)格式進行轉(zhuǎn)換,實現(xiàn)近乎實時的數(shù)據(jù)處理能力。
數(shù)據(jù)分析云化:云計算技術為企業(yè)IT的基礎設施帶來革命性的力量。將數(shù)據(jù)分析做成云端的SaaS服務后,開發(fā)人員將不再需要維護大量系統(tǒng)和工作流。最重要的一點,我們大幅度的降低數(shù)據(jù)分析埋點才可以詳細地收集用戶數(shù)據(jù)的這個巨大的限制,只需要結合業(yè)務需求,進行簡單的拖拽實現(xiàn)定制化的數(shù)據(jù)采集規(guī)則。
流處理和云兩種技術的結合,會使數(shù)據(jù)像雨滴一樣,慢慢聚集在云端的服務器里面開始積累,用戶將不再需要做大量的 IT 基礎設施工作,或是做各種數(shù)據(jù)清洗、整合、線上、線下聚合。
張夢溪表示,“在未來分工化、協(xié)作化的格局下,企業(yè)應該將一些相對支持性的功能外包給真正的專家或者是產(chǎn)品,專注做好自己最擅長的事情,所以數(shù)據(jù)分析云端化這是一個必然的趨勢。”
WOT峰會將分享如何用數(shù)據(jù)化運營創(chuàng)造商業(yè)價值
在11月28-29日由51CTO主辦位于深圳的【W(wǎng)OT2015“互聯(lián)網(wǎng)+”時代大數(shù)據(jù)技術峰會】中,張溪夢將帶來目前最先進的全自動化數(shù)據(jù)分析的相關技術和方法論,并與大家探討何利用實時數(shù)據(jù)分析,幫助企業(yè)最大程度地創(chuàng)造商業(yè)價值。
采訪最后,張溪夢描述了這樣的愿景:“我希望現(xiàn)在的企業(yè)家們都能看到云端數(shù)據(jù)分析自動化的趨勢,未來每一家企業(yè)和個人都可以做自己最擅長和關注的工作,一起來把這個世界構建的更美好。”