當(dāng)各種類型的數(shù)據(jù)開始通過多個(gè)數(shù)據(jù)通道實(shí)時(shí)大量流入時(shí)，數(shù)據(jù)管理業(yè)務(wù)面臨著新的復(fù)雜性。對(duì)超高速、大容量、多類型的業(yè)務(wù)數(shù)據(jù)的分析，需要先進(jìn)的數(shù)據(jù)管理技術(shù)和工具的成長(zhǎng)和發(fā)展，云計(jì)算技術(shù)就是在這種需要下應(yīng)運(yùn)而生的。

然后，在單一、公共或私有云網(wǎng)絡(luò)未能提供預(yù)期的業(yè)務(wù)結(jié)果之后，出現(xiàn)了多云和混合云環(huán)境時(shí)代。

數(shù)據(jù)管理通常包括高度復(fù)雜的任務(wù)，例如數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)集成、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全和數(shù)據(jù)庫(kù)管理。隨著數(shù)據(jù)速度和數(shù)量的不斷增加、數(shù)據(jù)類型的多樣性以及無(wú)限的數(shù)據(jù)通道(傳感器數(shù)據(jù))，數(shù)據(jù)管理很快就會(huì)變成一場(chǎng)噩夢(mèng)，需要有效的技術(shù)解決方案。雪上加霜的是，將數(shù)據(jù)從數(shù)據(jù)存儲(chǔ)傳輸?shù)竭h(yuǎn)程服務(wù)器的問題成為大多數(shù)企業(yè)難以解決的難題。

據(jù)預(yù)測(cè)，到 2022 年，基于云的服務(wù)市場(chǎng)將滿足“90% 的組織”。盡管云平臺(tái)潛力巨大，但云服務(wù)提供商也面臨不少挑戰(zhàn)。在當(dāng)前數(shù)據(jù)優(yōu)先和人工智能優(yōu)先的時(shí)代，實(shí)時(shí)數(shù)據(jù)分析主宰著商業(yè)格局，業(yè)務(wù)分析的復(fù)雜挑戰(zhàn)是：

• 孤立的數(shù)據(jù)存儲(chǔ)庫(kù)妨礙無(wú)縫數(shù)據(jù)集成
• 由于數(shù)據(jù)源、數(shù)據(jù)類型和數(shù)據(jù)量的增加而導(dǎo)致的低質(zhì)量數(shù)據(jù)
• 缺乏合格的數(shù)據(jù)科學(xué)人員
• 缺乏明確定義的數(shù)據(jù)治理 (DG) 政策

因此，企業(yè)已經(jīng)開始尋找能夠解決上述所有挑戰(zhàn)的數(shù)據(jù)管理平臺(tái)和工具方面的技術(shù)解決方案。這也轉(zhuǎn)化為全面的數(shù)據(jù)管理戰(zhàn)略，該戰(zhàn)略考慮了未來(lái)的數(shù)據(jù)質(zhì)量、數(shù)據(jù)治理和復(fù)雜的云基礎(chǔ)設(shè)施。

1. 多云的數(shù)據(jù)治理挑戰(zhàn)

設(shè)想一個(gè)業(yè)務(wù)場(chǎng)景，客戶必須管理多個(gè)業(yè)務(wù)部門——每個(gè)業(yè)務(wù)部門都配備了自己的邊緣計(jì)算環(huán)境，由獨(dú)特的云服務(wù)提供商托管和管理。管理這種地理上和運(yùn)營(yíng)上分散的數(shù)據(jù)可能會(huì)造成巨大的數(shù)據(jù)管理故障。 多云的最大好處是靈活性，即在企業(yè)需要的時(shí)間和地點(diǎn)提供解決方案的能力。

在混合云基礎(chǔ)架構(gòu)中，資源在本地、私有云和公共云環(huán)境中共享?；旌显浦许樌\(yùn)行的最大障礙是缺乏治理和法規(guī)遵從性。

緩解混合云中數(shù)據(jù)管理的挑戰(zhàn)表明，盡管混合云提供了未來(lái)的解決方案，但混合網(wǎng)絡(luò)上的數(shù)據(jù)安全性和合規(guī)性問題是企業(yè)必須準(zhǔn)備應(yīng)對(duì)的問題。

然而，在多云環(huán)境或者在混合云中，盡管所有計(jì)算資源都分布在廣域網(wǎng)上;資源管理(服務(wù)器)有些分散，對(duì)計(jì)算服務(wù)的流動(dòng)產(chǎn)生不利影響。

因此，這些類型的云計(jì)算設(shè)置會(huì)導(dǎo)致資源管理不一致和錯(cuò)誤，從而影響整體網(wǎng)絡(luò)性能質(zhì)量。此外，在日益規(guī)范的IT世界中，這些云網(wǎng)絡(luò)現(xiàn)在面臨著嚴(yán)重的合規(guī)性和治理問題。多云世界中數(shù)據(jù)治理的挑戰(zhàn)解釋了企業(yè)可以在多云環(huán)境中采用的一些 DG 最佳實(shí)踐。

2. 云倉(cāng)庫(kù)的數(shù)據(jù)治理挑戰(zhàn)

數(shù)據(jù)倉(cāng)庫(kù)日益增長(zhǎng)的重要性在 Mordor Intelligence 報(bào)告中得到了回應(yīng)，該報(bào)告表明數(shù)據(jù)倉(cāng)庫(kù)市場(chǎng)正以“11.17% 的復(fù)合年增長(zhǎng)率從 2019 年的 63 億美元增長(zhǎng)到 2025 年的 119.5 億美元”。在云上，數(shù)據(jù)倉(cāng)庫(kù)的開發(fā)進(jìn)一步簡(jiǎn)化和加速。但是，數(shù)據(jù)治理和安全性仍然是需要關(guān)注的兩個(gè)關(guān)鍵方面。

Privacera 首席執(zhí)行官 Balaji Ganesan表示：

要變得像今天的數(shù)據(jù)環(huán)境那樣去中心化和異構(gòu)，數(shù)據(jù)治理需要集中管理，但需要本地執(zhí)行。這實(shí)際上意味著實(shí)際的執(zhí)行是由盡可能接近數(shù)據(jù)的數(shù)據(jù)庫(kù)和應(yīng)用程序完成的，而不是放入另一個(gè)層，這會(huì)成為單點(diǎn)故障。

3. 分布式云成為最終贏家

為了闡明混合云和分布式云之間的主要區(qū)別，Gartner分析師曾評(píng)論：

“混合云的一部分由客戶設(shè)計(jì)、擁有、控制和運(yùn)營(yíng)，另一部分由公共云提供商負(fù)責(zé)。客戶保留對(duì)其運(yùn)營(yíng)部分的責(zé)任，但無(wú)法利用公共云提供商的能力(例如技能、創(chuàng)新速度、投資和技術(shù))。分布式云是下一代云計(jì)算，在保留云計(jì)算優(yōu)勢(shì)的同時(shí)擴(kuò)展了云的范圍和用例。首席信息官可以使用分布式云模型來(lái)定位未來(lái)需要的位置相關(guān)的云用例?！?/p>

那么，什么是分布式云環(huán)境?分布式云促進(jìn)了跨地域的多個(gè)公共云網(wǎng)絡(luò)的共存，結(jié)合了本地?cái)?shù)據(jù)中心、遠(yuǎn)程云提供商的網(wǎng)絡(luò)和其他第三方位置。但是，管理是從單點(diǎn)集中控制的。

在分布式云網(wǎng)絡(luò)中，通過提供邊緣計(jì)算已經(jīng)很好地解決了這個(gè)問題——允許服務(wù)器和應(yīng)用程序在非常接近數(shù)據(jù)位置的地方執(zhí)行，從而將業(yè)務(wù)分析的速度、質(zhì)量和性能提高幾個(gè)檔次。更重要的是，隨著先進(jìn)數(shù)據(jù)技術(shù)(如大數(shù)據(jù)、物聯(lián)網(wǎng) (IoT) 和人工智能 (AI)等先進(jìn)數(shù)據(jù)技術(shù)的出現(xiàn)，邊緣計(jì)算得到了商業(yè)推動(dòng)。

邊緣有助于解決以前在多云或混合云中被忽視的合規(guī)性問題。分布式云和邊緣計(jì)算共同實(shí)現(xiàn)了在復(fù)雜的多云環(huán)境中所有系統(tǒng)的一致性。

分布式云操作的最大好處是將中央云的功能和服務(wù)擴(kuò)展到遠(yuǎn)程衛(wèi)星網(wǎng)絡(luò)。誰(shuí)是最大的受益者?當(dāng)然是客戶，客戶現(xiàn)在可以在“單一控制平面”上從他所在的位置管理多個(gè)地理上分散的業(yè)務(wù)部門的所有業(yè)務(wù)計(jì)算需求。

4. 賦予數(shù)據(jù)消費(fèi)者權(quán)力

在自助數(shù)據(jù)分析時(shí)代，“賦能普通企業(yè)消費(fèi)者”是企業(yè)的核心重點(diǎn)。雖然通用數(shù)據(jù)保護(hù)條例 (GDPR) 等數(shù)據(jù)法規(guī)對(duì)全球企業(yè)施加了巨大壓力，要求它們進(jìn)行遵守，但是一些新的挑戰(zhàn)，例如企業(yè)數(shù)據(jù)素養(yǎng)推動(dòng)企業(yè)打破數(shù)據(jù)孤島，轉(zhuǎn)向技術(shù)支持的數(shù)據(jù)共享功能。

5. 展望未來(lái)：分布式數(shù)據(jù)管理就是答案

分布式數(shù)據(jù)管理路線圖表明，鑒于企業(yè)中數(shù)據(jù)的指數(shù)級(jí)增長(zhǎng)，集中的 IT 團(tuán)隊(duì)不可能管理和治理企業(yè)范圍的數(shù)據(jù)。為了確保對(duì)其所有用戶的數(shù)據(jù)訪問得到良好管理和監(jiān)管，企業(yè)必須轉(zhuǎn)向分布式數(shù)據(jù)管理模型。

在分布式數(shù)據(jù)管理模型中，數(shù)據(jù)管理角色和職責(zé)在整個(gè)企業(yè)中共享。在這個(gè)新場(chǎng)景中，分散的專家團(tuán)隊(duì)將“管理數(shù)據(jù)訪問和權(quán)限，同時(shí)消除目前集中 IT 存在的瓶頸。”

實(shí)際的實(shí)施過程可能相對(duì)困難，并且可能需要幾年時(shí)間才能演變成一個(gè)成熟的工作解決方案。未來(lái)的數(shù)據(jù)治理平臺(tái)將需要綜合規(guī)則用于數(shù)據(jù)處理，其中包括安全性、合規(guī)性以及其他數(shù)據(jù)管理任務(wù)的核心問題。