阿里云再發(fā)力云原生數(shù)據(jù)庫,打造一站式在線數(shù)據(jù)處理平臺
原創(chuàng)【51CTO.com原創(chuàng)稿件】近年來,大數(shù)據(jù)和人工智能成為了不可分割的兩個名詞。數(shù)智化已經(jīng)成為了當今時代的標簽。那么,在數(shù)智化時代,云原生到底意味著什么?和傳統(tǒng)數(shù)據(jù)庫相比,云原生數(shù)據(jù)庫的核心優(yōu)勢是什么?是否把數(shù)據(jù)庫搬上云就是云原生? 這些問題都在近日舉辦的"數(shù)聚云端,智馭未來" 為主題的阿里云數(shù)據(jù)庫創(chuàng)新上云峰會上得到了答案。
在數(shù)據(jù)爆炸性持續(xù)增長的時代,應(yīng)用對數(shù)據(jù)處理實時化的需求越來越強烈,智能化技術(shù)無處不在。除了傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)之外,還要增強對非結(jié)構(gòu)化數(shù)據(jù)處理的能力。權(quán)威數(shù)據(jù)顯示,在未來的一兩年時間內(nèi),75%以上的數(shù)據(jù)庫實例會以云化的方式部署和運營。
云數(shù)據(jù)庫顯然會變成一個最重要的發(fā)展方向,云數(shù)據(jù)庫廠商在快速的崛起和前進。據(jù) Gartner 發(fā)布《2020 年度全球數(shù)據(jù)庫魔力象限報告》顯示,阿里云進入全球數(shù)據(jù)庫領(lǐng)導(dǎo)者象限,這是中國數(shù)據(jù)庫 40 年來首次進入全球頂級數(shù)據(jù)庫行列。
云原生數(shù)據(jù)庫時代已來
縱觀數(shù)據(jù)庫的發(fā)展史,基礎(chǔ)設(shè)施和應(yīng)用場景都在發(fā)生變化,催生了數(shù)據(jù)庫技術(shù)的不斷演進?;A(chǔ)設(shè)施從大型機到小型機,再到PC服務(wù)器、互聯(lián)網(wǎng),再到今天的云+端,AIOT,應(yīng)用則從早期科學研究到國防,到大型商業(yè)處理,到企業(yè)信息化,再到互聯(lián)網(wǎng)時代的移動化、智能化、計算無處不在,這催生了數(shù)據(jù)庫系統(tǒng)從早期關(guān)系型數(shù)據(jù)庫到開源數(shù)據(jù)庫,發(fā)展到云原生數(shù)據(jù)庫。技術(shù)的演進、商業(yè)的需求、業(yè)務(wù)的需求推動了數(shù)據(jù)庫技術(shù)不斷發(fā)展。
數(shù)據(jù)庫在早期單節(jié)點的數(shù)據(jù)庫架構(gòu)中,系統(tǒng)應(yīng)用都需要主備架構(gòu)來確保高可用的能力。后來為了解決主備切換帶來的可擴展性不強,維護性復(fù)雜等痛點,設(shè)計了云原生架構(gòu)和可擴展性的架構(gòu),來解決分布式處理的查詢挑戰(zhàn)。云原生的數(shù)據(jù)庫將資源池化,資源解耦,做分布式共享存儲,之上是計算層和應(yīng)用接入層,使得應(yīng)用享受到了分布式技術(shù),云原生技術(shù)的紅利。同時,云原生的數(shù)據(jù)庫部署和使用起來非常簡單易用,可以百分之百兼容現(xiàn)有的生態(tài)。
至今,阿里云已經(jīng)打造出了豐富的企業(yè)級云原生數(shù)據(jù)庫產(chǎn)品組合,包括云原生關(guān)系型數(shù)據(jù)庫 PolarDB、云原生分布式數(shù)據(jù)庫 PolarDB-X、云原生數(shù)據(jù)倉庫 AnalyticDB(ADB)、一站式數(shù)據(jù)管理平臺 DMS、云原生多模數(shù)據(jù)庫 Lindorm 和企業(yè)級云數(shù)據(jù)庫服務(wù) RDS 等。
數(shù)據(jù)庫五大發(fā)展趨勢
說到未來數(shù)據(jù)庫的發(fā)展趨勢,阿里巴巴集團副總裁、阿里云數(shù)據(jù)庫產(chǎn)品事業(yè)部負責人李飛飛將其總結(jié)為五點。
首先,在未來,數(shù)據(jù)庫云原生+分布式是標配,用云原生的方式構(gòu)建數(shù)據(jù)庫系統(tǒng),資源池化,資源持有。在此基礎(chǔ)上,分布式是必然發(fā)生的,所有數(shù)據(jù)庫系統(tǒng)都將向這個方向演進。
第二,AI for DB和DB for AI。用AI將數(shù)據(jù)庫運維管控智能化,尤其是在云原生+分布式的前提下更重要,因為數(shù)據(jù)庫不僅是內(nèi)核的能力彈性高可用、可拓展性,更重要的是部署后應(yīng)用和運維的復(fù)雜度要大大降低。DB for AI則表示,面對越來越多非結(jié)構(gòu)化的數(shù)據(jù),分析能力十分重要。
第三,數(shù)據(jù)的安全可信。如何確保數(shù)據(jù)庫系統(tǒng)處理數(shù)據(jù)全鏈路過程中提供加密能力,和多方安全計算能力,提供隱私保護的能力,是很重要的趨勢。
第四,多模數(shù)據(jù)處理。當今,爆發(fā)性增長的數(shù)據(jù)包括結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、面向互聯(lián)網(wǎng)的數(shù)據(jù)等,還有新能源汽車這種新場景下產(chǎn)生的數(shù)據(jù)。這些數(shù)據(jù)和信息場景對新型數(shù)據(jù)庫多模態(tài)的處理AIOT場景非常重要。
第五,一站式在線數(shù)據(jù)處理平臺,庫倉一體,庫倉聯(lián)動,庫倉打通。用戶無需關(guān)心具體在使用哪種類型的數(shù)據(jù)庫,一站式的在線數(shù)據(jù)管理平臺可以管理一份數(shù)據(jù),多個引擎,數(shù)據(jù)之間打通,無縫流轉(zhuǎn),對應(yīng)實現(xiàn)無感知。
首個一站式敏捷數(shù)據(jù)倉庫解決方案
峰會上,阿里云重磅發(fā)布了首個一站式敏捷數(shù)據(jù)倉庫解決方案。該方案結(jié)合一站式數(shù)據(jù)管理平臺DMS和云原生數(shù)據(jù)倉庫AnalyticDB(ADB),真正實現(xiàn)了庫倉一體的技術(shù)架構(gòu),提供在線數(shù)據(jù)實時入倉、T+1周期性快照、按需建倉等能力,數(shù)據(jù)延時低至秒級,持續(xù)賦能業(yè)務(wù)在線化,令企業(yè)在線數(shù)據(jù)釋放最大價值。
相較于傳統(tǒng)方案,阿里云一站式敏捷數(shù)據(jù)倉庫解決方案對業(yè)務(wù)側(cè)影響小,不會因為數(shù)據(jù)匯聚集中和實時加工影響業(yè)務(wù)側(cè)正常運行,CPU、內(nèi)存占用低于5%;事務(wù)順序和數(shù)據(jù)準確性有保障,且處理鏈路短,支持在線數(shù)據(jù)實時處理落倉,效率更高。數(shù)據(jù)傳輸效率100m/s,數(shù)據(jù)延時在10秒內(nèi);支持復(fù)雜實時數(shù)據(jù)加工、計算邏輯;低代碼操作,能夠大大降低實時數(shù)倉的構(gòu)建難度,提升構(gòu)建效率的同時,支撐企業(yè)數(shù)字化轉(zhuǎn)型過程中的各類實時場景。
除了實時統(tǒng)計分析場景外,企業(yè)為滿足周期性數(shù)據(jù)分析需求,需建設(shè)周期性全量快照。傳統(tǒng)數(shù)倉的周期性全量集成方案會對生產(chǎn)業(yè)務(wù)造成穩(wěn)定性影響、全量集成時效性差、且無法滿足客戶針對任意時間點進行數(shù)據(jù)回溯的業(yè)務(wù)訴求。
針對T+1周期性集成場景,一站式敏捷數(shù)據(jù)倉庫解決方案支持基于拉鏈表的T+1全量數(shù)據(jù)快照,用戶通過簡單幾個步驟,即可按需生成各種周期的全量或增量快照。此外,業(yè)務(wù)還可按需進行任意時間點的數(shù)據(jù)回溯,以快速解決數(shù)據(jù)異常問題。
李飛飛在采訪中總結(jié)了阿里云數(shù)據(jù)庫系列產(chǎn)品的優(yōu)勢:一是來源于客戶需求,以市場為導(dǎo)向,以產(chǎn)品為核心,以技術(shù)為基礎(chǔ)。阿里云有龐大的客戶群體,可以不斷地貼近客戶的需求,深入理解客戶需求,這是技術(shù)演進的最大驅(qū)動力。二是人才。阿里云數(shù)據(jù)庫聚集了國內(nèi)外一流的數(shù)據(jù)庫人才和團隊,會吸引越來越多更優(yōu)秀的人才加入。三是歷史積累。阿里巴巴集團有非常豐富的、復(fù)雜的業(yè)務(wù)積累,是阿里云數(shù)據(jù)庫產(chǎn)品最好的練兵場。
【51CTO原創(chuàng)稿件,合作站點轉(zhuǎn)載請注明原文作者和出處為51CTO.com】