自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

【大咖來(lái)了 第5期】如何建設(shè)大數(shù)據(jù)中臺(tái)

原創(chuàng)
人工智能 中臺(tái)
易觀CTO郭煒?lè)窒淼摹度绾谓ㄔO(shè)大數(shù)據(jù)中臺(tái)》廣受關(guān)注,特地為大家整理成了圖文版方便閱讀。

本期出席《大咖來(lái)了》直播欄目的嘉賓是易觀CTO郭煒,進(jìn)行了主題為《如何建設(shè)大數(shù)據(jù)中臺(tái)》的分享,主要涉及三方面:為什么要建立大數(shù)據(jù)中臺(tái),技術(shù)大數(shù)據(jù)中臺(tái)建立參考模式與思考,及在大中臺(tái),小前臺(tái)場(chǎng)景下技術(shù)人員該做些什么。

為什么要建立大數(shù)據(jù)中臺(tái)

現(xiàn)在乃至未來(lái),絕大部分企業(yè)會(huì)陸續(xù)成為數(shù)據(jù)企業(yè),數(shù)字用戶資產(chǎn)會(huì)成為這些企業(yè)的核心資產(chǎn),人工智能、大數(shù)據(jù)等前沿技術(shù)也將會(huì)成為基礎(chǔ)設(shè)施,促進(jìn)每個(gè)企業(yè)的業(yè)務(wù)用戶、業(yè)務(wù)線快速增長(zhǎng)。其實(shí),大數(shù)據(jù)中臺(tái)就是企業(yè)從傳統(tǒng)信息化到數(shù)字化演進(jìn)過(guò)程中的必然產(chǎn)物。

中臺(tái)是技術(shù)人員從后臺(tái)走向前臺(tái)的過(guò)渡階段,為什么這樣說(shuō)?如下圖所示,以投資銀行舉例。

如把投資銀行對(duì)前臺(tái)、中臺(tái)、后臺(tái)的定義映射到互聯(lián)網(wǎng)或系統(tǒng),可以簡(jiǎn)單理解為前臺(tái)是賺錢(qián)的、后臺(tái)是做支持賺錢(qián)的,而中臺(tái)是支持更快賺錢(qián)的。建設(shè)大數(shù)據(jù)中臺(tái)的本質(zhì)在于把過(guò)去在后臺(tái)的工作挪到中臺(tái),進(jìn)一步支持前臺(tái)更高效的做數(shù)據(jù)分析。

大數(shù)據(jù)平臺(tái)風(fēng)行,為什么又需要建設(shè)大數(shù)據(jù)中臺(tái)呢?這是因?yàn)榻ㄔO(shè)大數(shù)據(jù)平臺(tái)時(shí)有各種各樣的痛點(diǎn),這里主要介紹如下三點(diǎn):

  • 大數(shù)據(jù)項(xiàng)目啟動(dòng)難:大數(shù)據(jù)平臺(tái)建設(shè)周期長(zhǎng),成本高、人員互聯(lián)網(wǎng)運(yùn)營(yíng)經(jīng)驗(yàn)不足。

  • 大數(shù)據(jù)項(xiàng)目效果體現(xiàn)難:大數(shù)據(jù)如何解決互聯(lián)網(wǎng)運(yùn)營(yíng)問(wèn)題、大數(shù)據(jù)系統(tǒng)建設(shè)結(jié)果是更多的BI報(bào)表、大數(shù)據(jù)建設(shè)ROI無(wú)法衡量。

  • 大數(shù)據(jù)項(xiàng)目執(zhí)行難:數(shù)據(jù)源紛繁復(fù)雜、原有系統(tǒng)涉及到多部門(mén)協(xié)調(diào)溝通、以及數(shù)據(jù)治理問(wèn)題。

整個(gè)大數(shù)據(jù)平臺(tái)依次從數(shù)據(jù)接入、計(jì)算、分析、運(yùn)營(yíng),每一層都有各種各樣的模塊具體運(yùn)作流程,如下圖。

 

面對(duì)這樣一個(gè)典型的大數(shù)據(jù)平臺(tái)結(jié)構(gòu),怎樣做才能提高效率呢?這里有以下五點(diǎn)思考。

  1. 讓業(yè)務(wù)還給業(yè)務(wù),盡可能避免業(yè)務(wù)人員等待技術(shù)反饋需求單這樣耗時(shí)的流程。

  2. 做到實(shí)時(shí)數(shù)據(jù)分析,滿足運(yùn)營(yíng)人員的需求。

  3. 能夠更好支持人工智能或增強(qiáng)智能所涵蓋的流行算法。

  4. 數(shù)據(jù)治理要在業(yè)務(wù)端進(jìn)行,而不是在技術(shù)端進(jìn)行梳理。

  5. 讓業(yè)務(wù)人員、數(shù)據(jù)科學(xué)家直接看到反饋,而不是傳統(tǒng)軟件加工方式。

從大數(shù)據(jù)平臺(tái)到數(shù)據(jù)中臺(tái)是一次從技術(shù)到業(yè)務(wù)的飛躍,過(guò)去我們只看技術(shù),到中臺(tái)時(shí)期,是從業(yè)務(wù)端看技術(shù)。

技術(shù)大數(shù)據(jù)中臺(tái)建立參考模式與思考

大數(shù)據(jù)中臺(tái)大致可分為大中臺(tái)和深中臺(tái)兩種模式,如下圖。

類(lèi)BAT的大數(shù)據(jù)中臺(tái)稱(chēng)之為大中臺(tái),是更廣泛的數(shù)據(jù)中臺(tái),底層布設(shè)LaaS 、PaaS,各個(gè)業(yè)務(wù)線在基礎(chǔ)之上進(jìn)行二次開(kāi)發(fā)。但對(duì)于小廠而言,并沒(méi)有那么多人力開(kāi)發(fā)通用中臺(tái)去支撐各個(gè)業(yè)務(wù)線,只能是各業(yè)務(wù)線圍繞自身需求進(jìn)行開(kāi)發(fā),這種情況被稱(chēng)之為深中臺(tái)。

說(shuō)到深中臺(tái)模式,這里需要提及的是數(shù)據(jù)河理論。那什么是數(shù)據(jù)河理論呢?

數(shù)據(jù)河理論是相對(duì)于數(shù)據(jù)湖而來(lái),數(shù)據(jù)湖是把過(guò)去各渠道的所有數(shù)據(jù)集中到一起,為相關(guān)計(jì)算提供便捷,但久而久之,會(huì)慢慢變成數(shù)據(jù)沼澤,數(shù)據(jù)運(yùn)營(yíng)越來(lái)越難。

數(shù)據(jù)河的出現(xiàn)是為了方便數(shù)據(jù)運(yùn)營(yíng),使得失去數(shù)據(jù)口徑和失去數(shù)據(jù)治理的數(shù)據(jù)越來(lái)越少。數(shù)據(jù)河中流淌著的是單一數(shù)據(jù)模型,數(shù)據(jù)產(chǎn)生直接實(shí)時(shí)流向使用者,不同的數(shù)據(jù)河,支撐起企業(yè)內(nèi)部數(shù)據(jù)水生態(tài)。

深中臺(tái)模式其實(shí)也是數(shù)據(jù)河模式,讓數(shù)據(jù)直接流動(dòng)起來(lái)。數(shù)據(jù)河這個(gè)抽象的概念可以落實(shí)到IOTA架構(gòu),如下圖。

IOTA是典型的去ETL化深中臺(tái)架構(gòu),有固定數(shù)據(jù)模型、在數(shù)據(jù)產(chǎn)生時(shí)規(guī)整原子口徑,把業(yè)務(wù)口徑交還給業(yè)務(wù)人員,且支持邊緣計(jì)算與即時(shí)反饋。

如下圖,為易觀ARGO-免費(fèi)用戶數(shù)據(jù)中臺(tái)樣例的結(jié)構(gòu)

在這個(gè)易觀ARGO-免費(fèi)用戶數(shù)據(jù)中臺(tái)樣例中,對(duì)免費(fèi)&非核心部分進(jìn)行開(kāi)源,支持私有化部署、用戶賬號(hào)跨端打通、實(shí)時(shí)復(fù)雜計(jì)算和下鉆分析、二次開(kāi)發(fā)。

和IOTA架構(gòu)一樣,也是在數(shù)據(jù)產(chǎn)生時(shí)有技術(shù)人員規(guī)整原子口徑,通過(guò)自定義指標(biāo)實(shí)時(shí)查詢,把業(yè)務(wù)口徑交還給業(yè)務(wù)人員。

在大中臺(tái),小前臺(tái)場(chǎng)景下技術(shù)人員該做些什么

大家會(huì)有疑問(wèn),數(shù)據(jù)中臺(tái)盛行,從事數(shù)據(jù)相關(guān)崗位的人,如大數(shù)據(jù)工程師、數(shù)據(jù)分析師等他們的風(fēng)向在哪里?

數(shù)據(jù)中臺(tái)的出現(xiàn),實(shí)現(xiàn)人員的技術(shù)業(yè)務(wù)結(jié)合與飛躍,讓數(shù)據(jù)技術(shù)人員不僅增加數(shù)據(jù)技術(shù)廣度,還加強(qiáng)了對(duì)前臺(tái)業(yè)務(wù)理解,成為跨領(lǐng)域的“龍”式新物種—數(shù)據(jù)中臺(tái)工程師。數(shù)據(jù)中臺(tái)工程師必備基礎(chǔ)技能主要有三,分別是:商業(yè)模式、流量模式和數(shù)據(jù)分析體系。

商業(yè)模式包含注意力運(yùn)營(yíng)、交易類(lèi)運(yùn)營(yíng)和效益類(lèi)運(yùn)營(yíng)。注意力運(yùn)營(yíng),這類(lèi)產(chǎn)品都是試圖最大化用戶在產(chǎn)品上花費(fèi)的時(shí)間,如媒體、游戲以及任何通過(guò)廣告變現(xiàn)的產(chǎn)品。關(guān)注指標(biāo)是粘性,如UV、PV、訪問(wèn)時(shí)長(zhǎng)、訪問(wèn)頻次、用戶到訪周期、訪問(wèn)間隔等。交易類(lèi)運(yùn)營(yíng),這類(lèi)產(chǎn)品幫助用戶做出購(gòu)買(mǎi)決定,如:電子商務(wù)平臺(tái)、各種交易平臺(tái)、生活服務(wù)、SaaS等。關(guān)注指標(biāo)是交易、交易活躍度,如新商品比例、商品被搜索比例、GMV、ARPU。效率類(lèi)運(yùn)營(yíng),這類(lèi)產(chǎn)品幫助用戶創(chuàng)建了一種簡(jiǎn)單可靠的方式來(lái)完成現(xiàn)有的任務(wù)或工作流程,如:工具類(lèi)、B2B等。關(guān)注指標(biāo)是用戶使用深度指標(biāo),如用戶完成一次工作流的數(shù)量、用戶完成一次工作流的時(shí)間。

如下圖,為數(shù)據(jù)中臺(tái)工程師必備技能之流量模式。

當(dāng)我們分析某個(gè)網(wǎng)站時(shí),可以遵循此圖,橫軸是變現(xiàn)能力,縱軸是導(dǎo)流能力,存在各種不同的角色。一般來(lái)講,金融類(lèi)變現(xiàn)能力強(qiáng),玩類(lèi)導(dǎo)流能力強(qiáng),出行類(lèi)導(dǎo)流能力強(qiáng)。

如下圖,為數(shù)據(jù)中臺(tái)工程師必備技能之?dāng)?shù)據(jù)分析體系。

每一個(gè)產(chǎn)品從開(kāi)始MVP驗(yàn)證有效、獲取種子用戶、提升產(chǎn)品質(zhì)量、提升用戶體驗(yàn)、拉新獲客實(shí)現(xiàn)營(yíng)收,及規(guī)模化實(shí)現(xiàn)利潤(rùn)最大化,在每個(gè)階段,都需要進(jìn)行分析,如用戶分析,參與度分析,渠道分析,構(gòu)成分析,收入分析等。

而每個(gè)階段都要需要一套分析體系,對(duì)業(yè)務(wù)進(jìn)行研究,所以技術(shù)人員需要補(bǔ)充數(shù)據(jù)分析能力和數(shù)據(jù)分析體系相關(guān)知識(shí)。

在新數(shù)據(jù)中臺(tái)情況下,迭代驗(yàn)證周期是數(shù)小時(shí)到數(shù)天的迭代周期,技術(shù)人員只需要建立原子口徑,由業(yè)務(wù)人員做實(shí)時(shí)業(yè)務(wù)數(shù)據(jù)分析,支持業(yè)務(wù)分析。

建設(shè)數(shù)據(jù)中臺(tái)前需要思考這幾步驟:第一是和技術(shù)/業(yè)務(wù)主管商議是否真的需要中臺(tái);第二是中臺(tái)模式選擇,是深中臺(tái)還是淺中臺(tái);第三是數(shù)據(jù)中臺(tái)選擇,無(wú)論做哪種選擇最終的結(jié)果一定是讓業(yè)務(wù)人員可以直接進(jìn)行相關(guān)數(shù)據(jù)分析,把業(yè)務(wù)還給業(yè)務(wù),讓技術(shù)做技術(shù);第四是人員和思路的變革。


 

 

責(zé)任編輯:杜寧 來(lái)源: 51CTO
相關(guān)推薦

2019-08-21 14:38:52

新零售時(shí)代智慧中臺(tái)

2020-01-13 21:18:30

大咖來(lái)了大數(shù)據(jù)云分析平臺(tái)

2019-12-27 17:25:13

大咖來(lái)了數(shù)據(jù)安全

2019-11-21 20:45:31

大咖來(lái)了面向交互人工智能

2019-11-07 16:32:26

數(shù)據(jù)智能化

2019-10-22 13:54:19

人工智能日志運(yùn)維

2020-02-14 16:27:05

大咖來(lái)電子競(jìng)技

2019-10-22 15:43:18

智能化數(shù)據(jù)人工智能

2019-12-12 14:30:15

智能一點(diǎn)智能導(dǎo)購(gòu)對(duì)話機(jī)器人

2019-12-31 14:30:00

數(shù)字聯(lián)盟移動(dòng)設(shè)備可信ID

2020-02-14 16:20:19

大咖來(lái)了IT管理者

2023-12-29 13:48:00

數(shù)據(jù)中臺(tái)

2019-05-28 23:00:45

數(shù)據(jù)中臺(tái)大數(shù)據(jù)開(kāi)源工具

2015-12-11 11:54:11

Android大咖秀

2017-08-09 16:13:48

SQL大數(shù)據(jù)語(yǔ)法

2020-06-06 12:37:37

數(shù)據(jù)中臺(tái)Gartner企業(yè)

2023-10-07 07:35:35

數(shù)據(jù)中臺(tái)數(shù)據(jù)源

2018-03-14 07:47:41

大數(shù)據(jù)語(yǔ)法SQL

2017-12-15 15:52:40

大數(shù)據(jù)數(shù)據(jù)IT

2016-03-28 17:34:25

技術(shù)架構(gòu)大數(shù)據(jù)51CTO
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)