年終盤點(diǎn):2020數(shù)據(jù)庫“四大”關(guān)鍵詞
又到了一年盤點(diǎn)時!回望過去一年,國內(nèi)數(shù)據(jù)庫領(lǐng)域發(fā)生了哪些有代表性的事件?這些事件背后預(yù)示哪些趨勢?老魚總結(jié)為以下4個方面:
- “風(fēng)口”
- “融合”
- “突破”
- “生態(tài)”
一、風(fēng)口
2020年,數(shù)據(jù)庫毫無疑問是風(fēng)口,席卷了大量的創(chuàng)業(yè)者和資本?;旧嫌幸欢ㄖ鹊臄?shù)據(jù)庫創(chuàng)業(yè)公司,背后都開始出現(xiàn)或長或短的股東名單,有上市公司,有產(chǎn)業(yè)投資基金,有風(fēng)險投資等。
數(shù)據(jù)庫為什么會成為風(fēng)口?
(1) 海量數(shù)據(jù)的爆發(fā)帶來了對數(shù)據(jù)庫的大量需求。IDC 在報告中指出,全球數(shù)據(jù)量總和將從2018 年的32ZB 增至2025 年的175ZB,信息數(shù)據(jù)呈爆發(fā)增長態(tài)勢。由于中國上網(wǎng)人數(shù)的增加以及視頻監(jiān)控設(shè)備的普及,加上大數(shù)據(jù)、移動互聯(lián)網(wǎng)、人工智能等技術(shù)革新和正式投入商用,IDC 認(rèn)為,中國將保持30%的復(fù)合增長率,到2025 年中國將成為世界上數(shù)據(jù)量最多的地區(qū)。
(2) 國家信息安全需求。在2020年中美爭端升級的背景下,中科院提出一份美國對中國關(guān)鍵技術(shù)的“卡脖子”清單。根據(jù)科技日報梳理,中國被美國卡脖子的關(guān)鍵核心技術(shù)一共涉及35個領(lǐng)域,數(shù)據(jù)庫便位列其中。沒有數(shù)據(jù)庫,可以說就沒有國計民生。在銀行存、取款、繳費(fèi),或是網(wǎng)上購物,手機(jī)刷健康寶、看天氣預(yù)報等等,背后都是數(shù)據(jù)庫在支撐。據(jù)智研咨詢調(diào)查數(shù)據(jù),截止到2017年,國外廠商占據(jù)我國數(shù)據(jù)庫市場份額超過80%。
(3) 數(shù)據(jù)庫巨大的市場規(guī)模。據(jù)美國Expert Market Research公司(EMR)2020年發(fā)布的市場調(diào)查,2019年全球數(shù)據(jù)庫行業(yè)市場規(guī)模已達(dá)到584億美元。未來五年,全球數(shù)據(jù)庫市場可以繼續(xù)保持復(fù)合年增長率13.81%的高速增長趨勢,2025年市場規(guī)模將達(dá)到約1269億美元。
據(jù)安信證券對數(shù)據(jù)庫國產(chǎn)化市場進(jìn)行測算,國內(nèi)數(shù)據(jù)庫市場規(guī)模約為300-400億元/年,國產(chǎn)化數(shù)據(jù)庫替換市場總體規(guī)模約為3000億元。據(jù)中信證券預(yù)測到 2024年中國數(shù)據(jù)據(jù)庫市場規(guī)模為533億元。
阿里、騰訊、華為、中興、浪潮等資金與技術(shù)實(shí)力雄厚的大廠,很早就敏感的意識到數(shù)據(jù)庫機(jī)會并開始布局。從2017年起,就不斷將自研數(shù)據(jù)庫產(chǎn)品推入市場并進(jìn)行大力的商業(yè)推廣,加劇了國產(chǎn)數(shù)據(jù)庫市場競爭。
巨頭進(jìn)入數(shù)據(jù)庫賽道,讓獨(dú)立數(shù)據(jù)庫廠商產(chǎn)生極強(qiáng)的危機(jī)感,如果不能快速的做大做強(qiáng),必然會被淹沒在競爭洪流當(dāng)中。因此,引入資本就成為必然選擇。
傳統(tǒng)“老四家”中的達(dá)夢完成億元融資、緊接著人大金倉也完成近億元融資,這都在不到1年的時間完成。
新興數(shù)據(jù)庫廠商:PingCAP完成D輪融資,星環(huán)科技完成D2輪融資,巨杉數(shù)據(jù)庫完成D輪融資,天云數(shù)據(jù)獲東方證券戰(zhàn)略投資,柏睿數(shù)據(jù)完成C輪融資,偶數(shù)科技完成B輪融資,易鯨捷完成B輪融資,新數(shù)科技完成A輪融資,酷克數(shù)據(jù)完成A++輪融資,萬里數(shù)據(jù)庫引入創(chuàng)意信息。
螞蟻集團(tuán)將OceanBase 獨(dú)立進(jìn)行公司化運(yùn)作,成立由螞蟻 100% 控股的數(shù)據(jù)庫公司北京奧星貝斯科技有限公司。此舉標(biāo)志著 OceanBase 將走上大規(guī)模商業(yè)化的軌道。
浪潮云溪數(shù)據(jù)庫(ZNBase)是浪潮集團(tuán)打造的另一重量級獨(dú)角獸,這是繼螞蟻金服為OceanBase 注冊獨(dú)立公司之后,又一家巨頭為其數(shù)據(jù)庫業(yè)務(wù)注冊獨(dú)立公司,其計劃投資規(guī)模將達(dá)到上百億。
二、融合
數(shù)據(jù)庫領(lǐng)域融合是大趨勢,而這完全由用戶需求決定。
(1) 云原生和分布式融合,架構(gòu)上無縫融合,提供更好的彈性、高可用。
(2) 與AI技術(shù)融合,在數(shù)據(jù)庫中,如何用AI和相關(guān)技術(shù),去做到智能化的運(yùn)維管控,比如索引推薦,MySQL治理、異常檢測等。
(3) 數(shù)據(jù)庫與大數(shù)據(jù)融合,包括HTAP(事務(wù)(TP)分析(AP)融合)以及離線計算與在線查詢?nèi)诤?。在過去的十幾年里,數(shù)據(jù)庫領(lǐng)域和大數(shù)據(jù)領(lǐng)域是分開的,一個做離線,一個做在線,相安無事。但從應(yīng)用角度或用戶視角看,越來越多的客戶和應(yīng)用需要最好是一套系統(tǒng)來解決數(shù)據(jù)從生產(chǎn)、處理、存儲、消費(fèi)全鏈路的過程,希望減少數(shù)據(jù)移動和存儲成本,避免總在做數(shù)據(jù)同步的訴求越來越強(qiáng)烈。
另外,今年Gartner將OPDBMS(Operational Database Management Systems)和DMSA(Data Management Solutions for Analytics)兩個本是分開領(lǐng)域合二為一,成為CDBMS(Cloud Database Management Systems),其實(shí)也從側(cè)面印證了這種融合趨勢。
(4) 多模多引擎融合。Multi-Model,同一個數(shù)據(jù)庫支持多個存儲引擎,可以同時滿足應(yīng)用程序?qū)τ诮Y(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一管理需求。如:星環(huán)科技TDH7.0就打破了行業(yè)內(nèi)普遍存在的不同數(shù)據(jù)庫產(chǎn)品切換不便利的問題,實(shí)現(xiàn)了包括分析型數(shù)據(jù)庫、寬表數(shù)據(jù)庫、時空數(shù)據(jù)庫、文檔數(shù)據(jù)庫、鍵值數(shù)據(jù)庫、行列混存數(shù)據(jù)庫、流處理引擎、圖數(shù)據(jù)庫等類型數(shù)據(jù)庫的統(tǒng)一處理。
(5) 軟硬件融合。有兩種說法,一種是軟硬一體交付,一種是非緊耦合,而是針對具備普適性、規(guī)模化鋪開的硬件,根據(jù)硬件不斷發(fā)展的特性,快速敏銳捕捉新特性,在數(shù)據(jù)庫系統(tǒng)設(shè)計里把硬件特性發(fā)揮出來。
三、突破
兩個層面:金融突破,國際突破。
金融是對數(shù)據(jù)庫依賴度最高,同時又是對數(shù)據(jù)庫要求最嚴(yán)苛且市場規(guī)模最大的行業(yè)。
據(jù)IDC數(shù)據(jù)顯示,國內(nèi)關(guān)系型數(shù)據(jù)庫市場新增投資按照行業(yè)劃分,金融占28%,政府占11%,大企業(yè)占26%,電信占17%,其他行業(yè)占18%。
5月,中興GoldenDB在中信銀行總行帳務(wù)核心業(yè)務(wù)系統(tǒng)投產(chǎn)。這是繼2019年10月GoldenDB在中信銀行信用卡核心業(yè)務(wù)投產(chǎn)后,在金融核心業(yè)務(wù)領(lǐng)域的又一成功實(shí)踐。
根據(jù)金融電子化報道,交通銀行以O(shè)ceanbase 0.4版本為基礎(chǔ)自主建設(shè)分布式數(shù)據(jù)庫(CBase)。2015年10月系統(tǒng)首次投產(chǎn)上線。2019年3月,“雙核異構(gòu)”項目在首家試點(diǎn)行上線。2020年8月,完成所有借記卡類金融交易、全行核心賬務(wù)系統(tǒng)下移,具備開放批量處理功能。計劃至2021年底,完成大機(jī)上核心業(yè)務(wù)的公司類應(yīng)用、公共類應(yīng)用下移。
2020年,萬里數(shù)據(jù)庫與光大銀行、光大科技基于GreatDB源碼聯(lián)合研發(fā)的EverDB數(shù)據(jù)庫,在光大銀行云繳費(fèi)、統(tǒng)一支付等系統(tǒng)進(jìn)行推廣應(yīng)用。
10月30日,平安銀行正式對外宣告,基于TDSQL的平安銀行信用卡“A+”新核心系統(tǒng)成功完成切換投產(chǎn)。從IBM Z系列大型機(jī)架構(gòu)轉(zhuǎn)向國產(chǎn)分布式系統(tǒng),這在國內(nèi)尚屬首例。
11月16日,騰訊云對外宣布,TDSQL已在印尼Bank Neo Commerce銀行新核心系統(tǒng)完成搭建并正式投入使用,成為海外銀行核心第一單。
如今,無論是央行、政策性銀行、國有商業(yè)銀行,全國股份制商業(yè)銀行,城商行,亦或是農(nóng)信社,都能找到國產(chǎn)數(shù)據(jù)庫的落地應(yīng)用。并且應(yīng)用已經(jīng)從非核心業(yè)務(wù)向核心業(yè)務(wù)全面滲透。
Gartner發(fā)布的2020年度全球云數(shù)據(jù)庫魔力象限評估結(jié)果,國內(nèi)有3家廠商進(jìn)入,其中阿里云更是挺進(jìn)了第一陣營——領(lǐng)導(dǎo)者(LEADERS)象限。這意味國產(chǎn)數(shù)據(jù)庫真正走進(jìn)世界一流。
5月20日,OceanBase二度榮登TPC-C性能榜首,7個月時間,OceanBase將性能分?jǐn)?shù)從千萬級,提升至億級。
12月,南大通用GBase 8a完成TPC-DS測試,以性能QphDS分?jǐn)?shù)8944478上榜,成為TPC-DS官方榜單物理機(jī)第一的數(shù)據(jù)倉庫。
國內(nèi)數(shù)據(jù)庫公司打榜TPC-DS最早始于星環(huán),早在2018年,星環(huán)就通過了TPC-DS測試拿到第一,打破了此前該領(lǐng)域十二年來沒有公司通過該項測試的局面。今年5月,阿里云AnalyticDB也通過了TPC-DS全流程測試取代星環(huán)成為第一。
無論是OceanBase、星環(huán)、阿里云、南大通用,能通過完整的TPC測試并創(chuàng)造新紀(jì)錄都體現(xiàn)了一種技術(shù)自信,同時也證明在某些領(lǐng)域國產(chǎn)數(shù)據(jù)庫與國外廠商技術(shù)上的差距總體來說已經(jīng)很小,甚至在某些方面已經(jīng)超過了國外廠商。
四、生態(tài)
基礎(chǔ)軟件領(lǐng)域有一句話叫得生態(tài)者得天下。
國產(chǎn)數(shù)據(jù)庫需要多久才能替換傳統(tǒng)數(shù)據(jù)庫,完全取決于國產(chǎn)數(shù)據(jù)庫的生態(tài)建設(shè)。
過去,國產(chǎn)數(shù)據(jù)庫公司大多只關(guān)注將產(chǎn)品賣出去,因此,往往只重視合作伙伴、客戶、交付生態(tài),卻忽視了技術(shù)生態(tài)、人才生態(tài)、開發(fā)者生態(tài)。
2020年,這種現(xiàn)象有所變化。這一年里,我們經(jīng)常聽到生態(tài)開放,人才培養(yǎng),開發(fā)者生態(tài)等詞匯出現(xiàn)。也看到一些標(biāo)準(zhǔn)規(guī)范的出臺,例如:
- 6月,華為正式開放openGauss源代碼,采用木蘭許可證(Mulan PSL v2),并成立openGauss開源社區(qū)和技術(shù)委員會。海量數(shù)據(jù)、云和恩墨、神州通用、虛谷偉業(yè)、東華軟件、人大金倉6家合作伙伴推出了基于openGauss的商業(yè)發(fā)行版。同時, GaussDB數(shù)據(jù)庫課程落地60+高校。
- 7月,達(dá)夢主辦的‘信創(chuàng)人才萬人培養(yǎng)計劃’暨2020首屆達(dá)夢數(shù)據(jù)庫精英挑戰(zhàn)賽”啟動。以賽代練、以賽促學(xué), 促進(jìn)信創(chuàng)產(chǎn)業(yè)專業(yè)人才隊伍建設(shè),為產(chǎn)業(yè)發(fā)展輸送具有創(chuàng)新能力和實(shí)踐能力的數(shù)據(jù)庫高端人才。
- 8月,OceanBase開發(fā)者社區(qū)上線,同時持續(xù)建設(shè)人才生態(tài),目標(biāo)三年培養(yǎng)五萬分布式數(shù)據(jù)庫人才。目前,OceanBase已經(jīng)開始與一些大學(xué)合作,進(jìn)行人才培養(yǎng),將分布式數(shù)據(jù)庫加入到本科課程。
- 11月,中國人民銀行發(fā)布并實(shí)施《分布式數(shù)據(jù)庫技術(shù)金融應(yīng)用規(guī)范》系列標(biāo)準(zhǔn),共包含《技術(shù)架構(gòu)》《安全技術(shù)要求》《災(zāi)難恢復(fù)要求》。為金融領(lǐng)域分布式數(shù)據(jù)庫研發(fā)、測試、評估、應(yīng)用、運(yùn)維、管理提供了明確統(tǒng)一的標(biāo)準(zhǔn)。
- 12月,騰訊云數(shù)據(jù)庫發(fā)布“知更鳥計劃”,未來5年,該計劃將培養(yǎng)100萬數(shù)據(jù)庫人才。具體將圍繞高校人才培養(yǎng)、優(yōu)才計劃、開發(fā)者生態(tài)圈三大核心內(nèi)容與高校展開實(shí)訓(xùn)課程、創(chuàng)新實(shí)驗基地、科研課題攻堅、及開放行業(yè)合作伙伴實(shí)習(xí)就業(yè)機(jī)會,推動數(shù)據(jù)庫技術(shù)創(chuàng)新。
- 12月,“新加坡大學(xué)生人工智能創(chuàng)新大賽”落下帷幕,這場由新加坡教育部和新加坡政府下屬研究部門“新加坡人工智能核心”(AI Singapore)提供支持,新加坡超算中心提供硬件的首屆AI大賽,由星環(huán)科技提供數(shù)據(jù)分析軟件。星環(huán)科技的大數(shù)據(jù)課程除在南京大學(xué)等國內(nèi)高校進(jìn)行了近三年之外,還在新加坡理工等海外高校開課。
- …………
回望2020,是極不平凡的一年,對中國數(shù)據(jù)庫產(chǎn)業(yè)亦是如此,我們期待更好的2021!