自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

數(shù)據(jù)倉(cāng)庫(kù)的下一階段該是什么?

數(shù)據(jù)庫(kù) 新聞
如何讓公司數(shù)據(jù)能夠快速和業(yè)務(wù)融合起來(lái)成為了廣大數(shù)據(jù)從業(yè)者和數(shù)據(jù)服務(wù)廠家一直以來(lái)思考的問(wèn)題。

在大數(shù)據(jù)時(shí)代,大家都意識(shí)到數(shù)據(jù)已經(jīng)成為了公司寶貴的資產(chǎn),但如何讓數(shù)據(jù)發(fā)揮價(jià)值,一直困擾著大家。數(shù)據(jù)技術(shù)人員需要長(zhǎng)時(shí)間去理解某一個(gè)業(yè)務(wù),業(yè)務(wù)人員也很難使用現(xiàn)代化數(shù)據(jù)分析工具賦能業(yè)務(wù)。那么,如何讓公司數(shù)據(jù)能夠快速和業(yè)務(wù)融合起來(lái)成為了廣大數(shù)據(jù)從業(yè)者和數(shù)據(jù)服務(wù)廠家一直以來(lái)思考的問(wèn)題。

01數(shù)據(jù)賦能業(yè)務(wù)的”攔路虎“

回想起Hadoop從2006開(kāi)始獨(dú)立發(fā)展,到現(xiàn)在已經(jīng)16年了,這些年來(lái)涌現(xiàn)出了很多數(shù)據(jù)技術(shù)棧,從數(shù)據(jù)接入存儲(chǔ),到數(shù)據(jù)計(jì)算分析,可以說(shuō)是百花齊放。

但在數(shù)據(jù)融入業(yè)務(wù)的過(guò)程中,逐漸也顯現(xiàn)了一些問(wèn)題。

我們經(jīng)常會(huì)聽(tīng)到這樣的聲音:

“你先提交一個(gè)數(shù)據(jù)需求流程吧,我們?cè)u(píng)估一下開(kāi)發(fā)工作量,排期開(kāi)發(fā)?!?

“這個(gè)不是我開(kāi)發(fā)的問(wèn)題,你提的這個(gè)指標(biāo)和小李提的統(tǒng)計(jì)邏輯不一樣啊”

“李老師,你說(shuō)的這個(gè)指標(biāo)定義中的XX是什么意思呢,這個(gè)數(shù)據(jù)源從哪里取值?”

“今年我們這邊的預(yù)算已經(jīng)用完了,以后再提數(shù)據(jù)需求,需要你們單獨(dú)對(duì)我們進(jìn)行結(jié)算的?!?

那么我們?yōu)槭裁磿?huì)經(jīng)常有以上這些“抱怨”,總結(jié)一下,無(wú)非以下幾點(diǎn):數(shù)據(jù)開(kāi)發(fā)流程長(zhǎng)、數(shù)據(jù)統(tǒng)計(jì)口徑不一致、技術(shù)人員與業(yè)務(wù)人員協(xié)同困難、開(kāi)發(fā)運(yùn)維成本高。

這就導(dǎo)致我們數(shù)據(jù)開(kāi)發(fā)人員,永遠(yuǎn)都有做不完的“提數(shù)”需求,數(shù)據(jù)產(chǎn)品永遠(yuǎn)有開(kāi)不完的會(huì),到了年底還要寫(xiě)數(shù)據(jù)為公司創(chuàng)造多少業(yè)務(wù)價(jià)值。

02數(shù)據(jù)人的掙扎

資深的數(shù)據(jù)人當(dāng)然知道現(xiàn)在數(shù)據(jù)賦能業(yè)務(wù)中的“攔路虎”,同時(shí)也做了一些嘗試。

優(yōu)化數(shù)據(jù)開(kāi)發(fā)流程

完整的數(shù)據(jù)開(kāi)發(fā)流程具備以下6個(gè)階段:提出階段、設(shè)計(jì)階段、開(kāi)發(fā)階段、測(cè)試階段、發(fā)布階段、運(yùn)維階段。

以前,也許我們會(huì)在不同平臺(tái)進(jìn)行各個(gè)階段的管理,比如數(shù)據(jù)建模是用的1個(gè)工具,數(shù)據(jù)開(kāi)發(fā)1個(gè)工具,數(shù)據(jù)測(cè)試一個(gè)工具,現(xiàn)在我們搭建了統(tǒng)一的數(shù)據(jù)平臺(tái),形成了設(shè)計(jì)開(kāi)發(fā)測(cè)試流水線的工作形式。

業(yè)務(wù)需求接口人

建立業(yè)務(wù)需求接口人,涉及某個(gè)領(lǐng)域的數(shù)據(jù)需求,統(tǒng)一由改角色向數(shù)據(jù)團(tuán)隊(duì)提交開(kāi)發(fā)申請(qǐng)。

技術(shù)融入業(yè)務(wù)

要求數(shù)據(jù)開(kāi)發(fā)人員定期和業(yè)務(wù)共同辦公,了解整個(gè)業(yè)務(wù)流轉(zhuǎn)過(guò)程,提升對(duì)業(yè)務(wù)的理解能力。

降低成本

從技術(shù)上建立冷熱數(shù)據(jù)存儲(chǔ)機(jī)制,優(yōu)化壓縮算法,建立數(shù)據(jù)生命周期等。

可以說(shuō),在某些方面,確實(shí)讓數(shù)據(jù)開(kāi)發(fā)人員輕松了一些,但是數(shù)據(jù)賦能業(yè)務(wù)價(jià)值真正提升了嗎?

03數(shù)據(jù)賦能業(yè)務(wù)的探索

數(shù)據(jù)中臺(tái)

數(shù)據(jù)中臺(tái)前幾年很火,最近溫度好像降了下來(lái)?;厮菀幌?,當(dāng)初提出來(lái)數(shù)據(jù)中臺(tái)這個(gè)概念是為了實(shí)現(xiàn)數(shù)據(jù)的分層和水平解耦,提供全域的數(shù)據(jù)服務(wù)。主要包括以下4部分:數(shù)據(jù)資產(chǎn)、數(shù)據(jù)治理、數(shù)據(jù)模型、數(shù)據(jù)服務(wù)。

數(shù)據(jù)模型,就是我們熟悉的數(shù)據(jù)倉(cāng)庫(kù)中的模型,按照數(shù)據(jù)倉(cāng)庫(kù)規(guī)范分層開(kāi)發(fā)模型,實(shí)現(xiàn)數(shù)據(jù)的標(biāo)準(zhǔn)化。

數(shù)據(jù)資產(chǎn),在數(shù)據(jù)倉(cāng)庫(kù)中我們已經(jīng)建立了一些模型,但是只有打通數(shù)據(jù)孤島后才可以稱為資產(chǎn)。

數(shù)據(jù)治理,為了保障數(shù)據(jù)資產(chǎn)的完整性、準(zhǔn)確性、一致性、及時(shí)性,為業(yè)務(wù)提供統(tǒng)一的、準(zhǔn)確的指標(biāo)保駕護(hù)航。

數(shù)據(jù)服務(wù),提供統(tǒng)一的數(shù)據(jù)服務(wù)在線查詢視圖,讓開(kāi)發(fā)者能夠快速、簡(jiǎn)單的訪問(wèn)數(shù)據(jù)服務(wù)。

數(shù)據(jù)倉(cāng)庫(kù)是“管理數(shù)據(jù)”,數(shù)據(jù)中臺(tái)是“經(jīng)營(yíng)數(shù)據(jù)”,數(shù)據(jù)中臺(tái)是為了提供服務(wù)而生,也有說(shuō)是為了前臺(tái)而生,數(shù)據(jù)中臺(tái)的使用對(duì)象仍然是開(kāi)發(fā)人員。

對(duì)于一個(gè)企業(yè)來(lái)說(shuō),業(yè)務(wù)人員才是“規(guī)則制定者”,只有讓業(yè)務(wù)人員自己把數(shù)據(jù)指標(biāo)用的“得心應(yīng)手”,才能真正的實(shí)現(xiàn)數(shù)據(jù)賦能。那么一個(gè)面向業(yè)務(wù)人員的,“零門(mén)檻”操作的數(shù)據(jù)指標(biāo)平臺(tái),將會(huì)成為企業(yè)實(shí)現(xiàn)全面數(shù)字化轉(zhuǎn)型的必選項(xiàng)。

指標(biāo)中臺(tái)

現(xiàn)代管理學(xué)之?彼得·德魯克有?句?常經(jīng)典的話:“What gets measured gets done”,意思是只有一件事情能被量化,才能夠被解決。就好?家?有了?臺(tái)秤,才能衡量減肥的效果。那么如何量化管理企業(yè)呢,這個(gè)統(tǒng)?的標(biāo)準(zhǔn)去衡量業(yè)務(wù),就是指標(biāo)的由來(lái)。

所以,從業(yè)務(wù)經(jīng)營(yíng)角度來(lái)看,指標(biāo)可以衡量業(yè)務(wù)發(fā)展的情況,也為未來(lái)業(yè)務(wù)方向的決策提供重要的支撐,指標(biāo)中臺(tái)的主要使用對(duì)象是業(yè)務(wù)人員。

面向業(yè)務(wù)人員的平臺(tái),很多數(shù)據(jù)人也都做過(guò)嘗試,比如很多“數(shù)據(jù)自助分析平臺(tái)”,在推廣過(guò)程中經(jīng)常會(huì)聽(tīng)業(yè)務(wù)人員說(shuō)“你這個(gè)工具還沒(méi)我的Excel好用”。所以,面向業(yè)務(wù)人員使用的平臺(tái)門(mén)檻一定要低。就要能達(dá)到現(xiàn)在普通人使用手機(jī)數(shù)碼相機(jī)就能像專業(yè)人員用單反相機(jī)拍出一樣漂亮照片的效果。

結(jié)合我們現(xiàn)階段數(shù)據(jù)賦能業(yè)務(wù)遇到的問(wèn)題,指標(biāo)中臺(tái)應(yīng)該能夠具備以下4個(gè)特點(diǎn):?效協(xié)同管理、業(yè)務(wù)敏捷提升、數(shù)據(jù)?徑?致、開(kāi)發(fā)成本降低。

?效協(xié)同管理,用戶可創(chuàng)建 Goals(目標(biāo)),并通過(guò)多層級(jí)的目標(biāo)結(jié)構(gòu)來(lái)管理指標(biāo),形成指標(biāo)體系,實(shí)現(xiàn)管理的可觀測(cè)性,完成從數(shù)據(jù)到管理決策的閉環(huán)。

業(yè)務(wù)敏捷提升,業(yè)務(wù)人員可以使用無(wú)代碼、低門(mén)檻的指標(biāo)管理平臺(tái),借助平臺(tái)自動(dòng)化構(gòu)建指標(biāo)能力和行業(yè)指標(biāo)模板,快速迭代賦能業(yè)務(wù)。

數(shù)據(jù)?徑?致,建立統(tǒng)一指標(biāo)目錄,使得組織能夠輕松定義和管理指標(biāo),形成統(tǒng)一的指標(biāo)口徑,并進(jìn)一步通過(guò)治理,增強(qiáng)數(shù)據(jù)的可信度。

開(kāi)發(fā)成本降低,業(yè)務(wù)人員自助創(chuàng)建、復(fù)用指標(biāo);數(shù)據(jù)團(tuán)隊(duì)擺脫繁重的 ETL 工作,只需聚焦指標(biāo)管理;企業(yè)人效大幅提升。

04指標(biāo)中臺(tái)的展望

指標(biāo)中臺(tái)并不是要完全替代數(shù)據(jù)倉(cāng)庫(kù),二者是集成與合作的關(guān)系。數(shù)據(jù)倉(cāng)庫(kù)作為指標(biāo)中臺(tái)的上游數(shù)據(jù)源。所以從階段上來(lái)說(shuō),建議從業(yè)務(wù)角度明確所需要的業(yè)務(wù)指標(biāo),然后接入數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù),并在指標(biāo)中臺(tái)中定義和管理指標(biāo)。那么,數(shù)據(jù)處理平臺(tái)和指標(biāo)中臺(tái)之間的協(xié)作也需要更加便捷。

對(duì)于AI方面的支持,現(xiàn)在很多業(yè)務(wù)除了需要指標(biāo),還需要進(jìn)行一些AI方面的深度數(shù)據(jù)挖掘分析,就像以前我們ETL任務(wù)都是離線的一樣,隨著數(shù)據(jù)技術(shù)的發(fā)展和業(yè)務(wù)的需求,有了越來(lái)越多的實(shí)時(shí)流處理任務(wù)。那么,對(duì)于指標(biāo)中臺(tái)來(lái)說(shuō),提供全方面的AI分析能力需求也會(huì)變得越來(lái)越多。

生態(tài)的建立,任何技術(shù)平臺(tái)的使用推廣,需要建立相應(yīng)的行業(yè)生態(tài),否則會(huì)很難進(jìn)行推廣。有了生態(tài),才會(huì)帶動(dòng)業(yè)務(wù)上下游一起來(lái)使用平臺(tái),逐漸形成標(biāo)準(zhǔn),也許會(huì)發(fā)展成為“行業(yè)中臺(tái)”,這樣的話,對(duì)于整個(gè)行業(yè)的業(yè)務(wù)賦能和效率提升意義就更大了。

責(zé)任編輯:張燕妮 來(lái)源: 數(shù)據(jù)社
相關(guān)推薦

2023-03-22 13:11:57

工業(yè)4.0人工智能

2012-01-11 11:36:12

移動(dòng)戰(zhàn)略企業(yè)語(yǔ)境分析服務(wù)

2017-03-14 09:25:16

云計(jì)算

2016-10-19 18:36:50

大數(shù)據(jù)大數(shù)據(jù)應(yīng)用

2016-05-13 10:20:43

大數(shù)據(jù)應(yīng)用數(shù)據(jù)管理數(shù)據(jù)分析

2021-09-13 13:51:42

云計(jì)算智慧城市云應(yīng)用

2023-01-11 12:46:16

工業(yè)4.0自動(dòng)化人工智能

2016-07-05 13:37:48

2021-01-07 13:35:06

人工智能聯(lián)邦學(xué)習(xí)

2023-03-03 07:49:37

2021-08-01 20:27:23

人工智能AI物聯(lián)網(wǎng)

2014-02-11 16:47:06

高密度交換機(jī)SDN

2023-09-12 10:29:43

5G毫米波技術(shù)5G網(wǎng)絡(luò)

2014-04-15 14:12:54

在華研發(fā)

2020-06-15 17:02:24

CRM

2019-03-06 14:43:42

云主席云計(jì)算人工智能

2019-08-29 11:10:34

深度學(xué)習(xí)神經(jīng)架構(gòu)人工智能

2019-10-28 13:54:45

多云數(shù)據(jù)云計(jì)算

2018-12-10 11:50:08

人工智能語(yǔ)音識(shí)別機(jī)器人

2013-05-28 09:49:04

Hadoop 2.0大數(shù)據(jù)數(shù)據(jù)存儲(chǔ)
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)