網(wǎng)易大數(shù)據(jù):一站式解決開發(fā)、管理、分析等難題
Uber、Airbnb等公司的快速崛起,彰顯了大數(shù)據(jù)的商業(yè)潛力,然而,大數(shù)據(jù)項目的技術(shù)挑戰(zhàn),導(dǎo)致許多企業(yè)積累多年的數(shù)據(jù)未能發(fā)力。為了幫助企業(yè)克服大數(shù)據(jù)應(yīng)用的難題,網(wǎng)易大數(shù)據(jù)推出了平臺化的解決方案,著眼于大數(shù)據(jù)開發(fā)與管理、大數(shù)據(jù)可視化分析等層面,幫助企業(yè)一站式解決大數(shù)據(jù)落地的難題。
大數(shù)據(jù)應(yīng)用的技術(shù)挑戰(zhàn)
互聯(lián)網(wǎng)的蓬勃發(fā)展,互聯(lián)網(wǎng)+的快速推進(jìn),以及人工智能的創(chuàng)業(yè)熱潮,無不得益于大數(shù)據(jù)及相關(guān)技術(shù)的運用。當(dāng)前,大數(shù)據(jù)已經(jīng)上升成為中國的國家戰(zhàn)略,互聯(lián)網(wǎng)和傳統(tǒng)行業(yè)決策者都迫切希望通過發(fā)揮大數(shù)據(jù)價值創(chuàng)新其商業(yè)體系。企業(yè)對大數(shù)據(jù)的渴望,并非出于趕時髦心理,亦非其他企業(yè)跨界經(jīng)營的倒逼,而是要實現(xiàn)科學(xué)化決策和智能化、精細(xì)化運營,這是構(gòu)建更健康、更高效、更具潛力的商業(yè)模式的必然需求。
知易行難,大數(shù)據(jù)落地的挑戰(zhàn)很大,傳統(tǒng)企業(yè)大數(shù)據(jù)應(yīng)用尤其如此。按照兩點論的思想,將價值密度高的內(nèi)部業(yè)務(wù)數(shù)據(jù)作為主要分析是自然的,但外部數(shù)據(jù)也是分析工作的重要補(bǔ)充——通過數(shù)據(jù)關(guān)聯(lián)可以產(chǎn)生更大的價值。根據(jù)中國信息通信研究院 2015 年對國內(nèi) 800 多家企業(yè)的調(diào)研,50%以上的企業(yè)把內(nèi)部業(yè)務(wù)平臺數(shù)據(jù)、客戶數(shù)據(jù)和管理平臺數(shù)據(jù)作為大數(shù)據(jù)應(yīng)用最主要的數(shù)據(jù)來源,32%的企業(yè)通過外部購買所獲得的數(shù)據(jù),18%的企業(yè)使用政府開放數(shù)據(jù)。
然而,這些數(shù)據(jù)的整合、分析并指導(dǎo)生產(chǎn)、營銷,并不是所有企業(yè)都擅長的。首先,企業(yè)需要一個數(shù)據(jù)開發(fā)平臺,能夠融合不同來源、不同格式的海量數(shù)據(jù),并進(jìn)行快速的計算,現(xiàn)實情況卻是企業(yè)內(nèi)部也存在很多數(shù)據(jù)孤島,現(xiàn)有的集中式系統(tǒng)在性能、容量以及支持的數(shù)據(jù)類型等方面都存在短板,這與中國企業(yè)信息化進(jìn)程有關(guān)。其次,從業(yè)務(wù)變化速度來說,企業(yè)需要能夠快速根據(jù)分析結(jié)果不斷優(yōu)化業(yè)務(wù)。再次,大數(shù)據(jù)平臺還要能夠幫助企業(yè)快速找到并更好地服務(wù)于用戶,實現(xiàn)企業(yè)價值與社會價值。
總而言之,企業(yè)需要一整套的大數(shù)據(jù)解決方案,能力全面,能做統(tǒng)一的大數(shù)據(jù)開發(fā)與管理,承載力強(qiáng),處理效率高,便于業(yè)務(wù)人員理解和改進(jìn)業(yè)務(wù),并且不會影響現(xiàn)有的業(yè)務(wù)系統(tǒng)。但對于企業(yè)而言,這是一個巨大的技術(shù)挑戰(zhàn)。
網(wǎng)易大數(shù)據(jù)平臺助力企業(yè)一站式“挖礦”
企業(yè)信息系統(tǒng)的完善,社交媒體、物聯(lián)網(wǎng)的應(yīng)用,都讓數(shù)據(jù)金礦更加觸手可及。入寶山而空歸,無疑是商業(yè)組織的一大憾事。網(wǎng)易公司推出的大數(shù)據(jù)平臺,包括網(wǎng)易猛犸(大數(shù)據(jù)開發(fā)和管理平臺)、網(wǎng)易有數(shù)(敏捷數(shù)據(jù)分析平臺)和網(wǎng)易數(shù)據(jù)資產(chǎn)三大獨立而關(guān)聯(lián)的產(chǎn)品,從根本上幫助企業(yè)杜絕了這種遺憾的發(fā)生。
即將迎來20歲誕辰的網(wǎng)易,從互聯(lián)網(wǎng)的繁榮與泡沫中脫穎而出成為巨頭,大數(shù)據(jù)對業(yè)務(wù)的支撐發(fā)揮了重要的作用。網(wǎng)易杭州研究院成立以來,網(wǎng)易就集中大量人力進(jìn)行分布式架構(gòu)及數(shù)據(jù)存儲、處理、傳輸及任務(wù)調(diào)度等技術(shù)的研發(fā),解決性能、容量、數(shù)據(jù)類型、成本等技術(shù)挑戰(zhàn)。當(dāng)前,網(wǎng)易內(nèi)部的大數(shù)據(jù)平臺每天處理的數(shù)據(jù)量已達(dá)PB級,日運行作業(yè)數(shù)超過7萬,穩(wěn)定支撐金融、教育、電商、游戲、安全等各個業(yè)務(wù)。
網(wǎng)易大數(shù)據(jù)產(chǎn)品基于網(wǎng)易技術(shù)積累和實踐經(jīng)驗研發(fā),但并非技術(shù)模塊堆砌,而是充滿了場景化設(shè)計的印記。與傳統(tǒng)笨重的IT架構(gòu)不同,網(wǎng)易猛犸立足互聯(lián)網(wǎng)邏輯,流程設(shè)計快捷靈活,包含快速傳輸技術(shù),同時支持實時計算和離線計算(類似Apache Beam統(tǒng)一批處理和流處理的理念),讓企業(yè)可以集中化管理、處理數(shù)據(jù)。網(wǎng)易猛犸提供大量便捷操作,如質(zhì)量校驗、模型反推開發(fā)任務(wù)等,并支持拖拽式可視化操作,讓用戶可以快速上手。
作為敏捷BI產(chǎn)品,網(wǎng)易有數(shù)提供可視化的操作方式,讓用戶可以靈活地構(gòu)建數(shù)據(jù)模型,敏捷地進(jìn)行多維分析,隨時隨地閱覽實時報表。網(wǎng)易有數(shù)支持EXCEl文件、傳統(tǒng)數(shù)據(jù)庫和大數(shù)據(jù)存儲系統(tǒng)的數(shù)據(jù)源,支持?jǐn)?shù)據(jù)行列級別權(quán)限控制、億級數(shù)據(jù)秒級響應(yīng),這讓不同業(yè)務(wù)人員可以靈活地進(jìn)行多維分析,快速地發(fā)現(xiàn)數(shù)據(jù)中的規(guī)律。
網(wǎng)易數(shù)據(jù)資產(chǎn)則全面整理網(wǎng)易和第三方大量分散的用戶數(shù)據(jù),匯聚、清洗、深度建模,以標(biāo)簽形式全方位量化用戶,形成精準(zhǔn)用戶畫像,可以為企業(yè)進(jìn)行個性化服務(wù)、精準(zhǔn)營銷、征信/風(fēng)控、客戶群洞察等打下堅實的基礎(chǔ)。