Doris聯(lián)姻Apache ***開源社區(qū)迎來百度新成員

Doris進駐***開源社區(qū)Apache 彰顯百度“開源速度”

　　近日，全球著名開源社區(qū)Apache基金會宣布“百度開源的Doris項目全票通過進入Apache孵化器”。這是百度繼ECharts后第二個進入Apache基金會的項目，充分彰顯了百度“開源速度”。

　　Doris是百度開發(fā)的面向在線報表和分析的數(shù)據(jù)倉庫系統(tǒng)，可以對標(biāo)于商業(yè)的 MPP 數(shù)據(jù)倉庫系統(tǒng)，比如Greenplum、Vertica、Teradata 等。

　　Doris 前身是百度Palo，自2017年8月在Github上開源以來，收獲700多個Star，目前性能和易用性方面已達(dá)到業(yè)界領(lǐng)先水平。同時，Doris 在百度內(nèi)部應(yīng)用于200多個產(chǎn)品線，在公有云和ToB業(yè)務(wù)中也獲得了高度認(rèn)可，外部已有包括小米、瓜子在內(nèi)的十多家公司使用。

　　Doris 主要基于 C++ 和 Java 開發(fā)，集成了 Google Mesa 和 Apache Impala 的技術(shù)。其中Mesa 是一個高度可擴展的分析數(shù)據(jù)存儲系統(tǒng)，用于存儲與 Google 互聯(lián)網(wǎng)廣告業(yè)務(wù)相關(guān)的關(guān)鍵測量數(shù)據(jù)。Impala是一種基于Hadoop數(shù)據(jù)處理環(huán)境的現(xiàn)代 MPP SQL 引擎。

　　在 Mesa 與 Impala 進行組合的基礎(chǔ)上，Doris 被設(shè)計為一個不依賴于其他系統(tǒng)的簡單且單一緊密耦合的系統(tǒng)，并實現(xiàn)了MySQL協(xié)議，使得用戶可以像使用 MySQL 一樣無門檻的過渡到Doris，包括各種報表應(yīng)用都可以通過MySQL協(xié)議連接 Doris，同時獲得高并發(fā)低延遲點查詢性能，而且還能進行高吞吐量的即席分析查詢。Doris 不僅提供大批量數(shù)據(jù)加載，而且還提供近乎實時的小批量，甚至流數(shù)據(jù)加載。此外Doris還具備高可用性，可靠性，容錯性和可擴展性。

　　Doris博采眾長，并在此基礎(chǔ)上進行了大膽創(chuàng)新，形成了自己獨特的優(yōu)勢，其特點主要包括：1)完全兼容MySQL協(xié)議;2)采用列式存儲、對數(shù)據(jù)以高壓縮比進行壓縮存儲、向量化執(zhí)行、LLVM優(yōu)化等先進技術(shù)，因此獲得了極高的查詢效率;3)支持多種存儲模型：同時支持類似于Mesa將列分為Key和Value的存儲模型，同時支持Unique Key和Dup Key的存儲模型。用戶可以根據(jù)自己的業(yè)務(wù)場景，選用不同的存儲模型;4)支持兩層分區(qū);5)支持多種數(shù)據(jù)導(dǎo)入方式;6)安全資源隔離擴容縮容;7)備份和恢復(fù);8)支持web監(jiān)控和管理;

　　據(jù)悉，百度抱著參與、回饋、影響社區(qū)的態(tài)度進行各種開源活動，充分尊重和理解開源社區(qū)的規(guī)則和精神，而繼 ECharts 成為 Apache 基金會的孵化項目后，百度繼續(xù)捐獻(xiàn)Doris項目給Apache 基金會，百度會繼續(xù)跟各個開源社區(qū)進行更加廣泛和深入的合作。

　　Doris項目Champion及導(dǎo)師、Apache基金會副總裁Dave Fisher表示：“很榮幸，也很高興作為Champion參與Doris在 Apache基金會的孵化過程，這是我們第二次看到百度捐獻(xiàn)優(yōu)秀的項目到Apache基金會，我們很高興看到百度在開源方面的巨大進步和突破。Doris作為面向在線報表和分析的數(shù)據(jù)倉庫系統(tǒng)，具有獨特的實現(xiàn)優(yōu)勢和較為豐富的使用前景，加入Apache基金會進一步表明Doris擁抱開源的決心，在遵循‘the Apache Way’的基礎(chǔ)上，打造一個更為中立、開放、多元的社區(qū)文化，讓更多人享受Doris項目帶來的技術(shù)革命。”