作為國(guó)產(chǎn)數(shù)據(jù)庫(kù)領(lǐng)軍企業(yè)的人大金倉(cāng)，積極迎接大數(shù)據(jù)時(shí)代對(duì)海量數(shù)據(jù)分析提出的技術(shù)挑戰(zhàn)，繼發(fā)布金倉(cāng)數(shù)據(jù)庫(kù)KingbaseES V7和金倉(cāng)商業(yè)智能統(tǒng)一平臺(tái)Kingbase SmartBI V2之后，全新推出面向商業(yè)智能和在線數(shù)據(jù)分析應(yīng)用領(lǐng)域的高性能10TB級(jí)海量數(shù)據(jù)庫(kù)管理系統(tǒng)：金倉(cāng)分析型數(shù)據(jù)庫(kù)—KingbaseES V7分析版。KingbaseES V7分析版內(nèi)置行存儲(chǔ)和列存儲(chǔ)兩大數(shù)據(jù)存儲(chǔ)和執(zhí)行引擎，提供高效的透明數(shù)據(jù)壓縮和并行數(shù)據(jù)裝載能力，集成高性能并行處理技術(shù)和豐富的OLAP優(yōu)化手段。能夠靈活應(yīng)對(duì)各種紛繁復(fù)雜的業(yè)務(wù)場(chǎng)景，是現(xiàn)代數(shù)據(jù)中心構(gòu)建在線事務(wù)處理和商業(yè)數(shù)據(jù)分析混合業(yè)務(wù)應(yīng)用的***選擇。

KingbaseES 分析版的技術(shù)架構(gòu)如下圖表示：

Kingbase ES 分析版從架構(gòu)上可以分為三層。***層是數(shù)據(jù)存儲(chǔ)層，主要完成存儲(chǔ)管理、封鎖、并發(fā)控制、事務(wù)管理、日志管理等。第二層是執(zhí)行引擎層，主要完成SQL 接口底層實(shí)現(xiàn)、解析、優(yōu)化和并行處理等。最上層是接口層，主要包括各種數(shù)據(jù)庫(kù)訪問(wèn)接口，以及數(shù)據(jù)庫(kù)管理工具和開(kāi)發(fā)工具的支持。

可以看到，Kingbase ES 分析版被設(shè)計(jì)為行列兩個(gè)存儲(chǔ)引擎和執(zhí)行引擎。使得KingbaseES數(shù)據(jù)庫(kù)可以從容應(yīng)對(duì)各種OLTP和OLAP混合業(yè)務(wù)場(chǎng)景，滿足企業(yè)復(fù)雜業(yè)務(wù)場(chǎng)景對(duì)數(shù)據(jù)庫(kù)系統(tǒng)的綜合性技術(shù)要求。

金倉(cāng)分析型數(shù)據(jù)庫(kù)—Kingbase ES 分析版的總體技術(shù)特性如下：

·雙重引擎，深度加速

KingbaseES分析版內(nèi)置行、列兩大數(shù)據(jù)存儲(chǔ)和執(zhí)行引擎，可以靈活應(yīng)對(duì)OLAP+OLTP混合業(yè)務(wù)場(chǎng)景。按列存儲(chǔ)有效適應(yīng)海量數(shù)據(jù)分析應(yīng)用對(duì)數(shù)據(jù)列敏感的業(yè)務(wù)場(chǎng)景，將對(duì)列的聚集操作和更新等操作，分別轉(zhuǎn)化為對(duì)磁盤(pán)的順序讀和順序?qū)? 從而從核心層面有效降低數(shù)據(jù)I/O，加速數(shù)據(jù)查詢(xún)處理性能。同時(shí)，按列存儲(chǔ)可以獲得10-40倍以上的高效透明的垂直數(shù)據(jù)壓縮能力，有效降低數(shù)據(jù)存儲(chǔ)開(kāi)銷(xiāo)，減少數(shù)據(jù)裝載和I/O的時(shí)間，從而降低現(xiàn)代企業(yè)數(shù)據(jù)中心的總體構(gòu)建和運(yùn)維成本，提升業(yè)務(wù)運(yùn)行效率。

·智能索引，多重優(yōu)化

索引在傳統(tǒng)數(shù)據(jù)庫(kù)中的維護(hù)帶來(lái)了較大的維護(hù)開(kāi)銷(xiāo)，尤其數(shù)據(jù)量持續(xù)增長(zhǎng)后表現(xiàn)非常明顯。KingbaseES分析版的列存儲(chǔ)引擎采用被稱(chēng)作自適應(yīng)優(yōu)化器的極小的元數(shù)據(jù)層來(lái)替換常規(guī)的索引，自動(dòng)為每列數(shù)據(jù)維護(hù)粗粒度的索引而不需要用戶(hù)手動(dòng)維護(hù)。同時(shí)，列存儲(chǔ)引擎還內(nèi)置分段統(tǒng)計(jì)、掃描結(jié)點(diǎn)的物化推遲等多重優(yōu)化技術(shù)，大幅提升OLAP查詢(xún)性能。

·快速裝載，并行計(jì)算

分析型業(yè)務(wù)場(chǎng)景往往伴隨著海量歷史數(shù)據(jù)，從而對(duì)數(shù)據(jù)加載、處理時(shí)效和數(shù)據(jù)管理的可擴(kuò)展能力有著更高的能力要求。KingbaseES分析版通過(guò)對(duì)數(shù)據(jù)裝載功能進(jìn)行了并行優(yōu)化，充分調(diào)度現(xiàn)代多核CPU處理能力，提供單表300GB/小時(shí)、多表500GB/小時(shí)的高速數(shù)據(jù)裝載速度。同時(shí)，KingbaseES分析版還內(nèi)置高效的并行SQL 執(zhí)行方法，并支持與金倉(cāng)云數(shù)據(jù)集群架構(gòu)整合，提供基于大規(guī)模并行處理（MPP）架構(gòu)的PB級(jí)數(shù)據(jù)管理線性擴(kuò)展能力。

·接口豐富，使用便捷

金倉(cāng)分析型數(shù)據(jù)庫(kù)有效繼承金倉(cāng)通用數(shù)據(jù)庫(kù)在數(shù)據(jù)類(lèi)型、函數(shù)、SQL以及與第三方數(shù)據(jù)庫(kù)兼容性上的豐富支持能力，提供統(tǒng)一一致的開(kāi)發(fā)接口和管理界面，有效降低學(xué)習(xí)、開(kāi)發(fā)和維護(hù)成本，保證業(yè)務(wù)應(yīng)用的平滑遷移。

1秒 PK 數(shù)月時(shí)間

我們來(lái)看下應(yīng)用了大數(shù)據(jù)分析型數(shù)據(jù)庫(kù)后能給客戶(hù)帶來(lái)哪些好處？

據(jù)專(zhuān)家分析：在利用大數(shù)據(jù)的過(guò)程中，數(shù)據(jù)的分析處理速度往往決定了數(shù)據(jù)應(yīng)用的成敗，用戶(hù)很難接受一個(gè)長(zhǎng)達(dá)數(shù)月的分析。分析型數(shù)據(jù)庫(kù)替代傳統(tǒng)行存數(shù)據(jù)庫(kù)解決了用戶(hù)海量歷史數(shù)據(jù)的存儲(chǔ)和I/O開(kāi)銷(xiāo)過(guò)大、加載時(shí)間過(guò)長(zhǎng)、無(wú)法有效結(jié)合業(yè)務(wù)場(chǎng)景提升數(shù)據(jù)查詢(xún)效率等問(wèn)題。而分析型數(shù)據(jù)庫(kù)與實(shí)時(shí)商業(yè)智能分析技術(shù)的綜合運(yùn)用可以將分析的響應(yīng)速度提高到秒級(jí),完全可以滿足用戶(hù)的業(yè)務(wù)要求，使用戶(hù)獲得良好的應(yīng)用體驗(yàn)。

誰(shuí)會(huì)用到金倉(cāng)分析型數(shù)據(jù)庫(kù)？我們來(lái)看兩個(gè)大數(shù)據(jù)分析應(yīng)用的案例：

① 沃爾瑪是最早通過(guò)利用大數(shù)據(jù)而受益的美國(guó)企業(yè)之一，擁有世界上***的數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)。通過(guò)對(duì)消費(fèi)者的購(gòu)物行為等海量數(shù)據(jù)進(jìn)行分析，沃爾瑪成為最了解顧客購(gòu)物習(xí)慣的零售商，并創(chuàng)造了“啤酒與尿布”的經(jīng)典案例。早在2007年，沃爾瑪就建立了一個(gè)超大的數(shù)據(jù)中心，其存儲(chǔ)能力高達(dá)4Pb以上。② 3月11日日本大地震發(fā)生后僅9分鐘，美國(guó)國(guó)家海洋和大氣管理局(NOAA)就發(fā)布了詳細(xì)的海嘯預(yù)警。隨即，NOAA通過(guò)對(duì)海洋傳感器獲得的實(shí)時(shí)數(shù)據(jù)進(jìn)行計(jì)算機(jī)模擬，制作的海嘯影響模型出現(xiàn)在YouTube等網(wǎng)站。

大數(shù)據(jù)分析已經(jīng)不再局限于互聯(lián)網(wǎng)的范疇和IT領(lǐng)域，有大量數(shù)據(jù)生成的用戶(hù)數(shù)據(jù)掘金都有可能用到：例如銀行、公共事業(yè)部門(mén)、科學(xué)、制造以及氣象等眾多行業(yè)，都出現(xiàn)海量的數(shù)據(jù)應(yīng)用，如果能應(yīng)用金倉(cāng)分析型數(shù)據(jù)庫(kù)及商業(yè)智能平臺(tái)等合理的管理、挖掘這些數(shù)據(jù)資源，對(duì)所在行業(yè)的發(fā)展將帶來(lái)不可估量的巨大推動(dòng)作用。

人大金倉(cāng)總裁任永杰博士表示：“在大數(shù)據(jù)時(shí)代，用戶(hù)的需求不僅僅局限于數(shù)據(jù)存儲(chǔ)，更向數(shù)據(jù)管理、分析、展現(xiàn)、挖掘、保護(hù)及相關(guān)服務(wù)等多元化方向發(fā)展。人大金倉(cāng)將立足基礎(chǔ)、融合吸收、重點(diǎn)突破，金倉(cāng)分析型數(shù)據(jù)庫(kù)、商業(yè)智能平臺(tái)等只是金倉(cāng)應(yīng)對(duì)大數(shù)據(jù)挑戰(zhàn)推出的部分解決方案，我們計(jì)劃用3-5年的時(shí)間，將人大金倉(cāng)打造成為國(guó)產(chǎn)大數(shù)據(jù)中心一站式解決方案提供商，迎接大數(shù)據(jù)、大應(yīng)用、大服務(wù)的時(shí)代。”

人大金倉(cāng)分析型數(shù)據(jù)庫(kù)的推出，順應(yīng)了大數(shù)據(jù)分析時(shí)代的市場(chǎng)趨勢(shì)，豐富了金倉(cāng)大數(shù)據(jù)中心一站式服務(wù)的產(chǎn)品線，為用戶(hù)進(jìn)一步高效挖掘數(shù)據(jù)價(jià)值、提高社會(huì)效益和經(jīng)濟(jì)效益貢獻(xiàn)了一份力量。人大金倉(cāng)分析型數(shù)據(jù)庫(kù)的推出必將引發(fā)新一輪基于國(guó)產(chǎn)數(shù)據(jù)庫(kù)大數(shù)據(jù)分析的應(yīng)用高潮，對(duì)推進(jìn)大數(shù)據(jù)時(shí)代我國(guó)信息化建設(shè)帶來(lái)深遠(yuǎn)而積極的影響。