自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

數(shù)據(jù)倉庫指標(biāo)體系搭建實戰(zhàn)!

數(shù)據(jù)庫 新聞
文章整體介紹了指標(biāo)體系建設(shè)方法論&實踐和工具產(chǎn)品的建設(shè)情況。

01指標(biāo)體系

1. 痛點分析

 主要從業(yè)務(wù)、技術(shù)、產(chǎn)品三個視角來看:

業(yè)務(wù)視角業(yè)務(wù)分析場景指標(biāo)、維度不明確;頻繁的需求變更和反復(fù)迭代,數(shù)據(jù)報表臃腫,數(shù)據(jù)參差不齊;用戶分析具體業(yè)務(wù)問題找數(shù)據(jù)、核對確認(rèn)數(shù)據(jù)成本較高。

技術(shù)視角指標(biāo)定義,指標(biāo)命名混亂,指標(biāo)不唯一,指標(biāo)維護口徑不一致;指標(biāo)生產(chǎn),重復(fù)建設(shè);數(shù)據(jù)匯算成本較高;指標(biāo)消費,數(shù)據(jù)出口不統(tǒng)一,重復(fù)輸出,輸出口徑不一致;

產(chǎn)品視角缺乏系統(tǒng)產(chǎn)品化支持從生產(chǎn)到消費數(shù)據(jù)流沒有系統(tǒng)產(chǎn)品層面打通;

2. 管理目標(biāo)

  • 技術(shù)目標(biāo)   統(tǒng)一指標(biāo)和維度管理,指標(biāo)命名、計算口徑、統(tǒng)計來源唯一, 維度定義規(guī)范、維度值一致
  • 業(yè)務(wù)目標(biāo)   統(tǒng)一數(shù)據(jù)出口、場景化覆蓋
  • 產(chǎn)品目標(biāo)   指標(biāo)體系管理工具產(chǎn)品化落地;指標(biāo)體系內(nèi)容產(chǎn)品化落地支持決策、分析、運營例如決策北極星、智能運營分析產(chǎn)品等

3. 模型架構(gòu)

圖片

02業(yè)務(wù)線定義

業(yè)務(wù)板塊定義原則:業(yè)務(wù)邏輯層面進行抽象、物理組織架構(gòu)層面進行細(xì)分,可根據(jù)實際業(yè)務(wù)情況進行層級分拆細(xì)化,層級分級建議進行最多進行三級分拆,一級細(xì)分可公司層面統(tǒng)一規(guī)范確定,二級及后續(xù)拆分可根據(jù)業(yè)務(wù)線實際業(yè)務(wù)進行拆分。

例如滴滴出行領(lǐng)域業(yè)務(wù)邏輯層面兩輪車和四輪車都屬于出行領(lǐng)域可抽象出行業(yè)務(wù)板塊(level一級),根據(jù)物理組織架構(gòu)層面在進行細(xì)分普惠、網(wǎng)約車、出租車、順風(fēng)車(level二級),后續(xù)根據(jù)實際業(yè)務(wù)需求可在細(xì)分,網(wǎng)約車可細(xì)分獨乘、合乘,普惠可細(xì)分單車、企業(yè)級。

03規(guī)范定義

  • 數(shù)據(jù)域

指面向業(yè)務(wù)分析,將業(yè)務(wù)過程或者維度進行抽象的集合。其中,業(yè)務(wù)過程可以概括為一個個不拆分的行為事件,在業(yè)務(wù)過程之下,可以定義指標(biāo);維度,是度量的環(huán)境,如乘客呼單事件,呼單類型是維度。為了保障整個體系的生命力,數(shù)據(jù)域是需要抽象提煉,并且長期維護更新的,變動需執(zhí)行變更流程。

  • 業(yè)務(wù)過程

指公司的業(yè)務(wù)活動事件,如呼單、支付都是業(yè)務(wù)過程。其中,業(yè)務(wù)過程不可拆分。

  • 時間周期

用來明確統(tǒng)計的時間范圍或者時間點,如最近30天、自然周、截止當(dāng)日等。

  • 修飾類型

是對修飾詞的一種抽象劃分。修飾類型從屬于某個業(yè)務(wù)域,如日志域的訪問終端類型涵蓋APP端、PC端等修飾詞。

  • 修飾詞

指的是統(tǒng)計維度以外指標(biāo)的業(yè)務(wù)場景限定抽象,修飾詞屬于一種修飾類型,如在日志域的訪問終端類型下,有修飾詞APP、PC端等。

  • 度量/原子指標(biāo)

原子指標(biāo)和度量含義相同,基于某一業(yè)務(wù)事件行為下的度量,是業(yè)務(wù)定義中不可再拆分的指標(biāo),具有明確業(yè)務(wù)含義的名稱,如支付金額。

  • 維度

維度是度量的環(huán)境,用來反映業(yè)務(wù)的一類屬性,這類屬性的集合構(gòu)成一個維度,也可以稱為實體對象。維度屬于一個數(shù)據(jù)域,如地理維度(其中包括國家、地區(qū)、省市等)、時間維度(其中包括年、季、月、周、日等級別內(nèi)容)。

  • 維度屬性

維度屬性隸屬于一個維度,如地理維度里面的國家名稱、國家ID、省份名稱等都屬于維度屬性。

  • 指標(biāo)分類主要分為原子指標(biāo)、派生指標(biāo)、衍生指標(biāo)。
  1. 原子指標(biāo)    基于某一業(yè)務(wù)事件行為下的度量,是業(yè)務(wù)定義中不可再拆分的指標(biāo),具有明確業(yè)務(wù)含義的名稱,如呼單量、交易金額
  2. 派生指標(biāo)    是1個原子指標(biāo)+多個修飾詞(可選)+時間周期,是原子指標(biāo)業(yè)務(wù)統(tǒng)計范圍的圈定。派生指標(biāo)又分以下二種類型:
  1. 事務(wù)型指標(biāo):是指對業(yè)務(wù)過程進行衡量的指標(biāo)。例如,呼單量、訂單支付金額,這類指標(biāo)需要維護原子指標(biāo)以及修飾詞,在此基礎(chǔ)上創(chuàng)建派生指標(biāo)。
  2. 存量型指標(biāo):是指對實體對象(如司機、乘客)某些狀態(tài)的統(tǒng)計,例如注冊司機總數(shù)、注冊乘客總數(shù),這類指標(biāo)需要維護原子指標(biāo)以及修飾詞,在此基礎(chǔ)上創(chuàng)建派生指標(biāo),對應(yīng)的時間周期一般為“歷史截止當(dāng)前某個時間”。
  1. 衍生指標(biāo)是在事務(wù)性指標(biāo)和存量型指標(biāo)的基礎(chǔ)上復(fù)合成的。主要有比率型、比例型、統(tǒng)計型均值 

04模型設(shè)計

主要采用維度建模方法進行構(gòu)建,基礎(chǔ)業(yè)務(wù)明細(xì)事實表主要存儲維度屬性集合和度量/原子指標(biāo);分析業(yè)務(wù)匯總事實表按照指標(biāo)類別(去重指標(biāo)、非去重指標(biāo))分類存儲,非去重指標(biāo)匯總事實表存儲統(tǒng)計維度集合、原子指標(biāo)或派生指標(biāo),去重指標(biāo)匯總事實表只存儲分析實體統(tǒng)計標(biāo)簽集合。

指標(biāo)體系在數(shù)倉物理實現(xiàn)層面主要是結(jié)合數(shù)倉模型分層架構(gòu)進行指導(dǎo)建設(shè),滴滴的指標(biāo)數(shù)據(jù)主要存儲在DWM層,作為指標(biāo)的核心管理層。

圖片

05維度管理

包括基礎(chǔ)信息和技術(shù)信息,由不同角色進行維護管理。

  • 基礎(chǔ)信息對應(yīng)維度的業(yè)務(wù)信息,由業(yè)務(wù)管理人員、數(shù)據(jù)產(chǎn)品或BI分析師維護,主要包括維度名稱、業(yè)務(wù)定義、業(yè)務(wù)分類。
  • 技術(shù)信息對應(yīng)維度的數(shù)據(jù)信息,由數(shù)據(jù)研發(fā)維護,主要包括是否有維表(是枚舉維度還是有獨立的物理維表)、是否是日期維、對應(yīng)code英文名稱和中文名稱、對應(yīng)name英文名稱和中文名稱。
  • 如果維度有維度物理表,則需要和對應(yīng)的維度物理表綁定,設(shè)置code和name對應(yīng)的字段。
  • 如果維度是枚舉維,則需要填寫對應(yīng)的code和name。維度的統(tǒng)一管理,有利于以后數(shù)據(jù)表的標(biāo)準(zhǔn)化,也便于用戶的查詢使用。

06指標(biāo)管理

包括基礎(chǔ)信息、技術(shù)信息和衍生信息,由不同角色進行維護管理。 

  • 基礎(chǔ)信息對應(yīng)指標(biāo)的業(yè)務(wù)信息,由業(yè)務(wù)管理人員、數(shù)據(jù)產(chǎn)品或BI分析師維護,主要包括歸屬信息(業(yè)務(wù)板塊、數(shù)據(jù)域、業(yè)務(wù)過程),基本信息(指標(biāo)名稱、指標(biāo)英文名稱、指標(biāo)定義、統(tǒng)計算法說明、指標(biāo)類型(去重、非去重)),業(yè)務(wù)場景信息(分析維度,場景描述);
  • 技術(shù)信息對應(yīng)指標(biāo)的物理模型信息,由數(shù)據(jù)研發(fā)進行維護,主要包括對應(yīng)物理表及字段信息;
  • 衍生信息對應(yīng)關(guān)聯(lián)派生或衍生指標(biāo)信息、關(guān)聯(lián)數(shù)據(jù)應(yīng)用和業(yè)務(wù)場景信息,便于用戶查詢指標(biāo)被哪些其它指標(biāo)和數(shù)據(jù)應(yīng)用使用,提供指標(biāo)血緣分析追查數(shù)據(jù)來源的能力。

原子指標(biāo)定義歸屬信息 + 基本信息 + 業(yè)務(wù)場景信息派生指標(biāo)定義時間周期 + 修飾詞集合 + 原子指標(biāo)修飾類型主要包含類型說明、統(tǒng)計算法說明、數(shù)據(jù)源(可選) 

07建模流程

建模流程主要是從業(yè)務(wù)視角指導(dǎo)工程師對需求場景涉及的指標(biāo)進行主題抽象,歸類,統(tǒng)一業(yè)務(wù)術(shù)語,減少溝通成本,同時避免后續(xù)的指標(biāo)重復(fù)建設(shè)。

圖片

分析數(shù)據(jù)體系是模型架構(gòu)中匯總事實表的物理集合,業(yè)務(wù)邏輯層面根據(jù)業(yè)務(wù)分析對象或場景進行指標(biāo)體系抽象沉淀。滴滴出行主要是根據(jù)分析對象進行主題抽象的,例如司機主題、安全主題、體驗主題、城市主題等。指標(biāo)分類主要是根據(jù)實際業(yè)務(wù)過程進行抽象分類,例如司機交易類指標(biāo)、司機注冊類指標(biāo)、司機增長類指標(biāo)等。 基礎(chǔ)數(shù)據(jù)體系是模型架構(gòu)中明細(xì)事實表和基礎(chǔ)維度表的物理集合,業(yè)務(wù)邏輯層面根據(jù)實際業(yè)務(wù)場景進行抽象例如司機合規(guī)、乘客注冊等,還原業(yè)務(wù)核心業(yè)務(wù)過程。

08開發(fā)流程

開發(fā)流程是從技術(shù)視角指導(dǎo)工程師進行指標(biāo)體系生產(chǎn)、運維及質(zhì)量管控,也是數(shù)據(jù)產(chǎn)品或數(shù)據(jù)分析師和數(shù)倉研發(fā)溝通協(xié)調(diào)的橋梁。

圖片

09指標(biāo)體系圖譜

指標(biāo)體系圖譜也可稱為數(shù)據(jù)分析圖譜主要是依據(jù)實際業(yè)務(wù)場景抽象業(yè)務(wù)分析實體,整合梳理實體涉及的業(yè)務(wù)分類、分析指標(biāo)和維度的集合。 建設(shè)方法:主要是通過業(yè)務(wù)思維、用戶視角去構(gòu)建,把業(yè)務(wù)和數(shù)據(jù)緊密關(guān)聯(lián)起來,把指標(biāo)結(jié)構(gòu)化分類組織。 

建設(shè)目的:

  • 對于用戶:便于用戶能夠快速定位所需指標(biāo)和維度,同時通過業(yè)務(wù)場景化沉淀指標(biāo)體系,能夠快速觸達用戶數(shù)據(jù)訴求。
  • 對于研發(fā):利于后續(xù)指標(biāo)生產(chǎn)模型設(shè)計、數(shù)據(jù)內(nèi)容邊界化、數(shù)據(jù)體系建設(shè)迭代量化和數(shù)據(jù)資產(chǎn)的落地。

圖片

▲ 指標(biāo)體系圖譜模型 

圖片

▲指標(biāo)體系圖譜實例 

圖片

▲指標(biāo)體系產(chǎn)品化

指標(biāo)體系涉及的產(chǎn)品集主要是依據(jù)其生命周期進行相應(yīng)建設(shè),通過產(chǎn)品工具打通數(shù)據(jù)流,實現(xiàn)指標(biāo)體系統(tǒng)一化、自動化、規(guī)范化、流程化管理。因為指標(biāo)體系建設(shè)本質(zhì)目標(biāo)是服務(wù)業(yè)務(wù),實現(xiàn)數(shù)據(jù)驅(qū)動業(yè)務(wù)價值,所以建設(shè)的核心原則是“輕標(biāo)準(zhǔn)、重場景,從管控式到服務(wù)式”。通過工具、產(chǎn)品、技術(shù)和組織的融合提高用戶使用數(shù)據(jù)效率,加速業(yè)務(wù)創(chuàng)新迭代。

其中和指標(biāo)體系方法論強相關(guān)產(chǎn)品就是指標(biāo)字典工具的落地,其產(chǎn)品的定位及價值:

  • 支撐指標(biāo)管理規(guī)范從方法到落地的工具,自動生成規(guī)范指標(biāo),解決指標(biāo)名稱混亂、指標(biāo)不唯一的問題,消除數(shù)據(jù)的二義性
  • 統(tǒng)一對外提供標(biāo)準(zhǔn)的指標(biāo)口徑和元數(shù)據(jù)信息

圖片

▲工具設(shè)計流程 (方法論->定義->生產(chǎn)->消費)

圖片

▲指標(biāo)定義

圖片

▲指標(biāo)生產(chǎn)

10總結(jié)

文章整體介紹了指標(biāo)體系建設(shè)方法論&實踐和工具產(chǎn)品的建設(shè)情況,指標(biāo)字典和開發(fā)工具已實現(xiàn)流程打通,與數(shù)據(jù)消費產(chǎn)品的打通后續(xù)會通過DataAPI方式提供數(shù)據(jù)服務(wù)。

責(zé)任編輯:張燕妮 來源: 數(shù)倉寶貝庫
相關(guān)推薦

2023-04-28 07:34:39

數(shù)據(jù)指標(biāo)數(shù)據(jù)治理

2024-07-11 11:52:24

數(shù)據(jù)指標(biāo)體系

2020-08-31 16:19:26

IT治理建立績效體系

2023-10-30 08:14:14

數(shù)據(jù)指標(biāo)體系

2022-09-20 09:42:54

數(shù)據(jù)指標(biāo)

2024-04-24 08:15:40

數(shù)據(jù)模型大模型AI

2024-05-29 12:41:33

2023-02-16 18:20:01

電商搜索數(shù)據(jù)

2024-11-14 11:07:15

2024-01-26 07:26:58

梳理數(shù)據(jù)指標(biāo)體系業(yè)務(wù)

2023-10-22 12:00:37

數(shù)據(jù)運營

2024-10-29 08:09:18

2021-04-23 14:16:13

數(shù)據(jù)分析師數(shù)據(jù)指標(biāo)運營工作

2024-10-08 09:01:45

2024-07-04 12:10:50

2023-03-28 08:28:34

2023-04-27 07:39:39

科技運營指標(biāo)信息

2012-11-30 15:08:16

指揮城市IT解決方案H3C

2011-09-22 14:20:38

中國軟件評測中心

2023-08-14 11:35:16

流程式轉(zhuǎn)化率數(shù)據(jù)指標(biāo)
點贊
收藏

51CTO技術(shù)棧公眾號