自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

新聞 架構(gòu) 中臺
有軟件開始的那一天起,數(shù)據(jù)這個行業(yè)就存在了。比如說原來最早的時候,有非常多的數(shù)據(jù)報表數(shù)據(jù)可視化,然后到后來,有了商業(yè)智能,有了Data Warehouse(就是數(shù)據(jù)倉庫),然后數(shù)據(jù)挖掘。

數(shù)據(jù)實際上是一個非常傳統(tǒng)的行業(yè)。

有軟件開始的那一天起,數(shù)據(jù)這個行業(yè)就存在了。比如說原來最早的時候,有非常多的數(shù)據(jù)報表數(shù)據(jù)可視化,然后到后來,有了商業(yè)智能,有了Data Warehouse(就是數(shù)據(jù)倉庫),然后數(shù)據(jù)挖掘。

數(shù)據(jù)這個行業(yè)不僅僅是軟件,它還有管理的部分,也就是說數(shù)據(jù)治理,即如何讓企業(yè)的數(shù)據(jù)治理的質(zhì)量更好。所以數(shù)據(jù)這個行業(yè)本身是一個非常傳統(tǒng)的行業(yè)。每個大型一點的企業(yè)都有自己的數(shù)據(jù)分析部門,數(shù)據(jù)倉庫部門。

那么為什么數(shù)據(jù)湖也好,數(shù)據(jù)平臺也好,在過去都沒有像今年數(shù)據(jù)中臺這么熱門。而且關(guān)注數(shù)據(jù)中臺的還不僅僅是技術(shù)部門,很多都是業(yè)務(wù)部門,業(yè)務(wù)部門以前不是特別關(guān)注這些技術(shù)的數(shù)據(jù)平臺和這些技術(shù)的概念,為什么呢?

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

一、平臺化的概念

講到數(shù)據(jù)中臺,我們就要提到平臺化。我們現(xiàn)在所講的SARS也好,所講的path也好,所講的數(shù)據(jù)中臺也好,所講的業(yè)務(wù)中臺也好,它實際上根本的思想來源是來自于平臺化,就是platform。

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

舉個例子,我們拿一個飲料廠的產(chǎn)品線來講,那么他可以生產(chǎn)果汁,可以生產(chǎn)飲料,還可以生產(chǎn)其他的產(chǎn)品,它可能是三四條不同的生產(chǎn)線。從原材料加工成飲料,它有很多環(huán)節(jié),雖然品種不一樣,但是它很多環(huán)節(jié)是類似的,比如裝瓶、攪拌。

那么這幾個不同的生產(chǎn)流程、生產(chǎn)線,我們可以把那些公共的部分合并起來,更加專業(yè)化,然后并且讓他們獨立去維護,之后把那些不同的產(chǎn)品面向客戶,使客戶體驗不同的產(chǎn)品,使它獨立出來,這就是平臺化的思路。

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

中臺里面很重要的兩個中臺,一個是業(yè)務(wù)中臺,一個是數(shù)據(jù)中臺。業(yè)務(wù)中臺是提供可復(fù)用的業(yè)務(wù),API數(shù)據(jù)中臺是提供數(shù)據(jù)洞察和智能的。

不管什么中臺,它實際上都是平臺思想的一個體現(xiàn),一種具象。

二、數(shù)據(jù)中臺為什么受歡迎

這里舉個例子,原來的數(shù)據(jù)平臺也好,數(shù)據(jù)湖也好,數(shù)據(jù)倉庫也好,它們的出發(fā)點很多時候有局限性,應(yīng)該說更是一個支撐性的技術(shù)系統(tǒng),即一定要去考慮我先有什么數(shù)據(jù),然后我能干什么,這是傳統(tǒng)的數(shù)據(jù)平臺,數(shù)據(jù)湖,依賴于現(xiàn)有數(shù)據(jù)的質(zhì)量,現(xiàn)有數(shù)據(jù)的狀況來做的這樣的一個支撐性的技術(shù)平臺。

但是數(shù)據(jù)中臺在我們現(xiàn)在所講的概念里面,它更多的是從業(yè)務(wù)出發(fā),比如說我們現(xiàn)在所設(shè)計的一套精益數(shù)據(jù)的方法,它就是從業(yè)務(wù)出發(fā),一開始都不用看你系統(tǒng)里面有什么數(shù)據(jù),重點的是去解決你的業(yè)務(wù)需要什么樣的數(shù)據(jù)服務(wù)?

只要這個服務(wù)有價值,那我們就去想辦法去拿到數(shù)據(jù),如果沒有能力,我們?nèi)ソ夹g(shù)能力,去完成數(shù)據(jù)服務(wù)的提供。

所以數(shù)據(jù)中臺最重要區(qū)別于傳統(tǒng)數(shù)據(jù)平臺,技術(shù)類平臺的區(qū)別在于數(shù)據(jù)中臺的思維是業(yè)務(wù)思維,他從業(yè)務(wù)問題出發(fā),這也就是為什么業(yè)務(wù)部門對數(shù)據(jù)中臺會這么歡迎。

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

我們的目標是哪怕我的數(shù)據(jù)只有50%的準確性,那么在我提高數(shù)據(jù)質(zhì)量同時,我也希望這50%準確的數(shù)據(jù)也能為我產(chǎn)生業(yè)務(wù)價值。

過去那么多年,建設(shè)的系統(tǒng)是把業(yè)務(wù)數(shù)據(jù)化,現(xiàn)在我們很多的企業(yè)在后臺系統(tǒng)建設(shè)好以后,在做的業(yè)務(wù)系統(tǒng)實際上是把數(shù)據(jù)業(yè)務(wù)化,而且有一點也是我們現(xiàn)在行業(yè)里面重點強調(diào)的,原來我們講先有業(yè)務(wù),后有數(shù)據(jù),先有應(yīng)用系統(tǒng),后有數(shù)據(jù)系統(tǒng),這個觀點從今年開始要發(fā)生改變了,在業(yè)務(wù)系統(tǒng)還沒有建立起來的時候,我們就要有數(shù)據(jù)思維,就要把數(shù)據(jù)集成到業(yè)務(wù)系統(tǒng)的架構(gòu)里面去。

原來我們所講的業(yè)務(wù)系統(tǒng)叫OLTP,即在線交易系統(tǒng),然后數(shù)據(jù)類的系統(tǒng)叫OLAP,即在線分析性系統(tǒng)。

現(xiàn)在可以看到一個趨勢,這個趨勢就是OLTP和OLAP在融合,也就是很多企業(yè)所講的P流一體,即為批處理和實時流數(shù)據(jù)處理一體化。原來我們的OLTP、OLAP是平行的關(guān)系,先要通過OLTP系統(tǒng)產(chǎn)生數(shù)據(jù),然后ETL,然后抽取到OLAP里面,再把多個OLTP的系統(tǒng)抽在一起,之后在OLTP、OLAP的系統(tǒng)里面產(chǎn)生洞見,變成數(shù)據(jù)可視化報表給業(yè)務(wù)部門去看,再去改變你的OLTP的做法,這里的OLTP和OLAP是平行的關(guān)系。

這樣的話,原來的數(shù)據(jù)百分之七八十在企業(yè)里的應(yīng)用都是數(shù)據(jù)可視化,都是BI,都是data house報表,讓人看,這叫人機接口,這個是人看完數(shù)據(jù)以后,然后再去提取,之后去做你的決策,改變你的行為,去看數(shù)據(jù)。

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

從今年開始,數(shù)據(jù)中臺更多強調(diào)的是機器與機器的接口,就是我的數(shù)據(jù)分析出來的結(jié)果,不僅僅以報表可視化的形式讓人看,而更多的是把這些API這樣的一些數(shù)據(jù)服務(wù)直接地嵌入到交易系統(tǒng)里面產(chǎn)生影響,變成你的價格策略,變成你的推薦引擎,變成你的風(fēng)險管控。

那么我們所講數(shù)據(jù)中臺,它不僅僅是一個技術(shù)平臺,它還是一個體系。

數(shù)據(jù)中臺會對應(yīng)到一個企業(yè)里的一個部門一個組織,也要有數(shù)據(jù)戰(zhàn)略的支撐,要有數(shù)據(jù)治理,數(shù)據(jù)中臺上面生長一個數(shù)據(jù)服務(wù),數(shù)據(jù)服務(wù)提供給我們業(yè)務(wù)系統(tǒng),提供給我們業(yè)務(wù)中臺,然后我們所接收到的數(shù)據(jù)消費者,就都生長在數(shù)據(jù)中臺之上,數(shù)據(jù)中臺是一個生態(tài),是一個平臺,是一個數(shù)據(jù)服務(wù),是生產(chǎn)、加工、交易、度量、運營的平臺,所以我們把數(shù)據(jù)中臺實際上叫做一個體系。

三、數(shù)據(jù)中臺對企業(yè)的價值

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

數(shù)據(jù)中臺解決的核心問題:

  • 解決應(yīng)用開發(fā)快于數(shù)據(jù)開發(fā)的效率問題。
  • 解決數(shù)據(jù)開發(fā)與數(shù)據(jù)產(chǎn)生價值的協(xié)作問題。
  • 解決在很多企業(yè),它的開發(fā)人員,技術(shù)人員沒有數(shù)據(jù)能力的問題,這是它從技術(shù)層面的核心問題上來解決問題。

1.應(yīng)用開發(fā)要快于數(shù)據(jù)開發(fā)的速度

原來我們在做一張報表,或者是在業(yè)務(wù)系統(tǒng)里面需要查詢一個數(shù)據(jù)結(jié)果的時候,它的過程是比較麻煩的,而且它的測試往往也是比較復(fù)雜的,因為業(yè)務(wù)系統(tǒng)是有業(yè)務(wù)屬性的,但是數(shù)據(jù)是跨業(yè)務(wù)的,是融合的。

在OLAP領(lǐng)域中,很多這種情況,比如說我的企業(yè),Java開發(fā)工程師很好找,做應(yīng)用的人很好找,懂data,知道如何做數(shù)據(jù)建模,如何做算法的人相對來講是比較少的。但是在我們應(yīng)用開發(fā)過程當中,我們會發(fā)現(xiàn)有太多的數(shù)據(jù)需求,這種情況下應(yīng)用開發(fā)的速度是快于數(shù)據(jù)開發(fā)的速度。

2.加速從數(shù)據(jù)到價值的服務(wù)產(chǎn)生過程

在很多時候我們會發(fā)現(xiàn)不同的應(yīng)用開發(fā)項目組,他們都會調(diào)用同樣的數(shù)據(jù)模型,同樣的數(shù)據(jù)服務(wù),但是由于不了解數(shù)據(jù),并且他們也不知道底層的數(shù)據(jù)結(jié)構(gòu),所以他們不同的項目組可能對同樣的數(shù)據(jù)處理會用不同的方法,自己做自己的,然后出來的結(jié)果不一樣。有的是錯誤的,所以開發(fā)速度慢,并且數(shù)據(jù)結(jié)果不準確,質(zhì)量低.

但是現(xiàn)在數(shù)據(jù)中臺就要解決這個問題,數(shù)據(jù)中臺要把那些復(fù)用的數(shù)據(jù)模型,要把那些數(shù)據(jù)模型data派對中一些數(shù)據(jù)復(fù)用的能力,變成一個數(shù)據(jù)的能力平臺,讓那些做數(shù)據(jù)的人專注在做數(shù)據(jù),把數(shù)據(jù)變成一個樂高積木,數(shù)據(jù)服務(wù)提供給應(yīng)用開發(fā),然后不同的應(yīng)用開發(fā)項目組可以共同的去調(diào)用唯一的SARS數(shù)據(jù)服務(wù),去保證它的數(shù)據(jù)質(zhì)量和一致性,加速從數(shù)據(jù)到價值的服務(wù)產(chǎn)生過程,打造高響應(yīng)力且更加智慧的業(yè)務(wù)。

阿里架構(gòu)師用3點講透數(shù)據(jù)中臺,這些都是你沒看過的

如何加快從你的業(yè)務(wù)到數(shù)據(jù)到你的數(shù)據(jù)產(chǎn)品之間的反饋的速度響應(yīng)力,也是數(shù)據(jù)中臺要解決的問題。它要把應(yīng)用的價值,應(yīng)用的速度,和你數(shù)據(jù)產(chǎn)生的速度中間的差異,時間的差異和有時候業(yè)務(wù)理解上的差異,通過數(shù)據(jù)中臺去把它彌補起來。

 

責任編輯:張燕妮 來源: 今日頭條
相關(guān)推薦

2020-01-16 15:35:00

高并發(fā)架構(gòu)服務(wù)器

2024-11-22 10:49:46

2013-08-21 13:43:16

架構(gòu)師架構(gòu)師面試職場面試

2013-03-21 09:34:42

架構(gòu)師架構(gòu)設(shè)計

2021-05-25 09:51:42

架構(gòu)運維技術(shù)

2020-06-28 08:34:07

架構(gòu)師阿里軟件

2012-12-13 09:40:04

架構(gòu)師

2021-02-01 07:40:55

架構(gòu)師阿里技專家

2009-02-26 16:32:58

SaaS開發(fā)SaaS應(yīng)用Open API

2016-05-19 16:31:10

青云QingCloud

2019-06-03 14:35:38

大數(shù)據(jù)數(shù)據(jù)開發(fā)語言

2019-11-25 21:46:12

數(shù)據(jù)湖云計算數(shù)據(jù)倉庫

2024-02-29 09:37:25

Java并發(fā)編程

2020-02-11 15:49:49

數(shù)據(jù)中臺趨勢

2018-07-06 11:25:40

Java架構(gòu)師面試

2025-01-13 12:00:00

反射Java開發(fā)

2024-03-18 08:15:48

Java并發(fā)編程

2023-12-28 07:49:11

線程池源碼應(yīng)用場景

2011-04-28 10:12:13

海量數(shù)據(jù)分析平臺

2020-01-22 16:29:52

機器學(xué)習(xí)人工智能計算機
點贊
收藏

51CTO技術(shù)棧公眾號