對話Gartner孫鑫:深度解讀數(shù)據(jù)中臺的技術與落地
當前,以大數(shù)據(jù)、人工智能、物聯(lián)網、云計算為代表的新一代信息技術蓬勃發(fā)展,推動著人類社會進入數(shù)字化時代。而作為這個時代重要的生產資料,數(shù)據(jù)已成為企業(yè)獲取競爭優(yōu)勢的關鍵。
然而,盡管數(shù)據(jù)的價值得到了企業(yè)的廣泛認可,但是如何管理數(shù)據(jù)資產仍然缺少處理手段?;诖耍?ldquo;數(shù)據(jù)中臺”概念應運而生,即通過數(shù)據(jù)技術,對海量數(shù)據(jù)進行采集、計算、存儲、加工,同時統(tǒng)一標準和口徑。數(shù)據(jù)中臺將數(shù)據(jù)統(tǒng)一之后,會形成標準數(shù)據(jù),再進行存儲,形成大數(shù)據(jù)資產層,進而為企業(yè)提供高效服務。
那么,數(shù)據(jù)中臺建設會面臨哪些挑戰(zhàn)?構建數(shù)據(jù)中臺需要哪些技術解決方案?數(shù)據(jù)中臺的未來演進方向是什么?帶著這些問題,比特網采訪到了Gartner研究總監(jiān)孫鑫先生。作為專注于商業(yè)智能分析及數(shù)據(jù)科學領域的分析師,孫鑫為數(shù)據(jù)和分析領導者提供建議,幫助他們構建、落地、發(fā)展現(xiàn)代化商業(yè)智能平臺。
Gartner研究總監(jiān)孫鑫先生
數(shù)據(jù)中臺建設如何避免踩坑?
如今,越來越多的企業(yè)已認識到數(shù)據(jù)的價值,開始探索數(shù)據(jù)中臺的建設,以數(shù)據(jù)驅動企業(yè)經營決策升級及業(yè)務提升。不過,企業(yè)的數(shù)據(jù)中臺建設并非易事,面臨著諸多問題,如企業(yè)不知需要采用何種技術方案來構建數(shù)據(jù)中臺、更不知在數(shù)據(jù)中臺建設過程中需要注意哪些問題。
對此,孫鑫指出,一個好的數(shù)據(jù)中臺產品應涉及數(shù)據(jù)目錄、數(shù)據(jù)虛擬化、自服務數(shù)據(jù)準備、批處理整合、數(shù)據(jù)復制、數(shù)據(jù)同步、流數(shù)據(jù)整合等方面的能力。
此外,在搭建數(shù)據(jù)中臺前,企業(yè)最需要注意的問題包括以下三方面:
一是要結合自身情況,評估整條數(shù)據(jù)端到端的產品能力鏈路上到底缺乏哪一部分。不能為了中臺而中臺,這與企業(yè)高管的價值定位息息相關。
二是要考慮如何更好地溝通業(yè)務。實際上,企業(yè)的數(shù)據(jù)是割裂的,很難被關聯(lián)或收集,最終會給企業(yè)所需的業(yè)務造成影響。問題根源不僅是技術和業(yè)務的產品能力差距,更多是價值的隔閡和鴻溝。如果企業(yè)計劃建設數(shù)據(jù)中臺,讓其真正產生價值,那就需要對數(shù)據(jù)中臺進行情境化設計,為業(yè)務產生相關的數(shù)據(jù)驅動能力。
三是要認識到數(shù)據(jù)中臺不僅是技術問題,更是組織戰(zhàn)略問題。一個成功的數(shù)據(jù)分析團隊除了具有關注規(guī)模經濟、確保企業(yè)數(shù)據(jù)一致性、分享最佳實踐的中央側數(shù)據(jù)分析團隊外,還需考慮搭建一個關注快速部署、貢獻業(yè)務側相關數(shù)據(jù)、產生業(yè)務報表的業(yè)務側數(shù)據(jù)分析團隊。因此,要搭建技術端的中臺,在“人”這一側、在組織架構這一側也要進行相應努力。
構建數(shù)據(jù)中臺加速數(shù)字化轉型
目前,受疫情影響,企業(yè)的數(shù)字化轉型浪潮變得愈發(fā)洶涌。隨之而來的是數(shù)據(jù)量越來越大、數(shù)據(jù)類型越來越豐富,數(shù)據(jù)結構也越來越復雜,這給企業(yè)數(shù)字化轉型帶來了不小阻礙。
“實際上,已經投入數(shù)據(jù)倉庫、數(shù)據(jù)湖建設的企業(yè)通常會面臨一個問題,即如何對已有數(shù)據(jù)進行投資,從而獲得價值。”孫鑫說道。
據(jù)悉,導致這種問題發(fā)生的原因主要有以下幾點,具體來看:
第一,企業(yè)雖已建設好數(shù)據(jù)資產——無論是數(shù)據(jù)倉庫還是數(shù)據(jù)湖,但業(yè)務部門依舊不知道數(shù)據(jù)放在哪里;
第二,企業(yè)將大量時間花費在尋找數(shù)據(jù)上,而不是分析數(shù)據(jù)上,這讓數(shù)據(jù)投入的投資回報率無法很好體現(xiàn),因為企業(yè)只是在尋找,并沒有真正分析數(shù)據(jù),讓其產生價值,從而幫助決策;
第三,企業(yè)過去津津樂道的數(shù)據(jù)資產并沒有通過良好的設計,讓業(yè)務側的用戶真正貢獻數(shù)據(jù)資產。
據(jù)孫鑫介紹,現(xiàn)在有非常多的元數(shù)據(jù)管理工具,可以通過自動化的采集方式,幫助企業(yè)搜索到更符合自身情境的數(shù)據(jù)、完成數(shù)據(jù)信息采集、自動調取企業(yè)內部的元數(shù)據(jù),從而為企業(yè)展現(xiàn)完整信息資產。而智能搜索也是幫助企業(yè)快速尋找與自己相關的數(shù)據(jù)源,讓這些藏在各個系統(tǒng)中的數(shù)據(jù)能更直觀地遞送到用戶手中。
此外,企業(yè)的數(shù)據(jù)資產可能不再是由IT進行的一個單項目維護,而是由業(yè)務共同參與、以眾籌方式不斷演進優(yōu)化企業(yè)的數(shù)據(jù)資產,在業(yè)務用戶之間有著非常良好的共享。通過這幾點,企業(yè)就可加速自身數(shù)字化轉型。
數(shù)據(jù)在安全的基礎上如何發(fā)揮更大價值?
2021年9月1日,《數(shù)據(jù)安全法》正式施行,那么數(shù)據(jù)中臺如何確保數(shù)據(jù)安全,讓其發(fā)揮更大的價值呢?
孫鑫認為,一個好的政策、好的治理平臺更多是一個可以“連接”的治理,可以幫助企業(yè)關聯(lián)所有數(shù)據(jù)的相關政策,從而確保企業(yè)安全地使用數(shù)據(jù)?,F(xiàn)在一些數(shù)據(jù)中臺已具有類似的“安全模塊”或“治理模塊”,可幫助企業(yè)確保數(shù)據(jù)安全。但真正適用如《數(shù)據(jù)安全法》、《個人信息保護法》等法律法規(guī),企業(yè)可能還需投入。
采訪最后,孫鑫分享了對于數(shù)據(jù)中臺未來演進方向的看法,他表示,中國企業(yè)的習慣性做法是只用收集的方式管理自己的數(shù)據(jù)源,但長此以往會延后業(yè)務產生價值的時間。其實,數(shù)據(jù)中臺對于數(shù)據(jù)管理而言,并非一定要用于連接或收集,而是需要企業(yè)掌握平衡。數(shù)據(jù)中臺可根據(jù)元數(shù)據(jù),即數(shù)據(jù)消費行為,來判斷數(shù)據(jù)源到底用采集好、還是連接好,通過元數(shù)據(jù)找到數(shù)據(jù)消費行為后對其進行資產化處理。因此,好的未來中臺演進方向是把握好數(shù)據(jù)采集和連接的平衡。
寫在最后:
毫無疑問,數(shù)據(jù)中臺已成為企業(yè)運營管理的重要工具。相信,隨著技術的不斷成熟,企業(yè)數(shù)據(jù)中臺的建設將變得更加完善,企業(yè)的數(shù)字化轉型之路將變得更加平坦。