云計(jì)算驅(qū)動(dòng)的數(shù)字化浪潮席卷了所有行業(yè)。計(jì)算、網(wǎng)絡(luò)、存儲(chǔ)被稱為云基礎(chǔ)設(shè)施的三大件，存儲(chǔ)又是其中變化最快的一項(xiàng)，這是因?yàn)殡S著數(shù)據(jù)驅(qū)動(dòng)型組織戰(zhàn)略的普及，云計(jì)算、移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等新技術(shù)在各個(gè)領(lǐng)域深化應(yīng)用，全球數(shù)據(jù)量呈爆炸式增長態(tài)勢(shì)。IDC的研究報(bào)告顯示，全球數(shù)據(jù)圈(以數(shù)據(jù)圈代表每年被創(chuàng)建、采集或是復(fù)制的數(shù)據(jù)集合)將從2018年的32ZB增至2025年的175ZB。全球數(shù)據(jù)量爆炸增長，為數(shù)據(jù)存儲(chǔ)市場(chǎng)帶來巨大增量。在這樣的背景下，現(xiàn)有的數(shù)據(jù)存儲(chǔ)模式已經(jīng)難以滿足數(shù)據(jù)存儲(chǔ)要求，數(shù)據(jù)已經(jīng)由原來存儲(chǔ)在專有的集中式存儲(chǔ)設(shè)備上而向云存儲(chǔ)（公有云、私有云、混合云）上轉(zhuǎn)型，以降低固定資產(chǎn)支出和運(yùn)維管理費(fèi)用，以激活數(shù)據(jù)來驅(qū)動(dòng)組織的業(yè)務(wù)創(chuàng)新，注入持續(xù)發(fā)展的源動(dòng)力。

其中，混合云存儲(chǔ)是一種將公有云存儲(chǔ)服務(wù)和私有云存儲(chǔ)資源互聯(lián)互通的技術(shù)實(shí)現(xiàn)，促進(jìn)云上和云下的數(shù)據(jù)雙向互通。混合云存儲(chǔ)越來越受歡迎，充分發(fā)揮公有云的超大規(guī)模、彈性擴(kuò)展、隨需而用和低成本優(yōu)勢(shì)，以及私有云的資源物理隔離和安全合規(guī)的特點(diǎn)，業(yè)已成為數(shù)據(jù)高效存儲(chǔ)的發(fā)展方向。

技術(shù)立業(yè)的金山云存儲(chǔ)產(chǎn)品線

早在2007年，金山就開始籌建金山實(shí)驗(yàn)室，進(jìn)行云存儲(chǔ)技術(shù)領(lǐng)域的研究。2012年，金山將云存儲(chǔ)業(yè)務(wù)進(jìn)行拆分，成立金山云公司。同年，金山云正式在國內(nèi)推出在線云存儲(chǔ)服務(wù)KS3，為用戶提供優(yōu)質(zhì)的互聯(lián)網(wǎng)對(duì)象存儲(chǔ)服務(wù)。此后，金山云存儲(chǔ)產(chǎn)品的不斷迭代演進(jìn)、推陳出新，陸續(xù)推出功能豐富的各種存儲(chǔ)產(chǎn)品及服務(wù)。金山云主要云存儲(chǔ)產(chǎn)品包括：對(duì)象存儲(chǔ)（KS3）、彈性塊存儲(chǔ)（EBS）、文件存儲(chǔ)（KFS）、歸檔存儲(chǔ)（KArchive）及混合云存儲(chǔ)產(chǎn)品系列（KingStorage）。

金山云的對(duì)象存儲(chǔ)KS3，已經(jīng)在線穩(wěn)定運(yùn)行超過十年，云上規(guī)模超EB級(jí)，且每年都保持著高速增長，是業(yè)內(nèi)技術(shù)先進(jìn)的超大規(guī)模公有云分布式存儲(chǔ)服務(wù)。在私有化部署的場(chǎng)景下金山云提供KingStorage混合云存儲(chǔ)產(chǎn)品，繼承了公有云存儲(chǔ)的架構(gòu)與功能優(yōu)勢(shì)，并充分考慮并實(shí)現(xiàn)私有化場(chǎng)景下客戶業(yè)務(wù)對(duì)存儲(chǔ)的個(gè)性化需求。依托于金山云混合云存儲(chǔ)優(yōu)秀的架構(gòu)設(shè)計(jì)，保障了業(yè)務(wù)能力的穩(wěn)定輸出，具備大規(guī)模的數(shù)據(jù)存儲(chǔ)與處理能力，聚焦于云原生應(yīng)用、大數(shù)據(jù)存算分離、自動(dòng)駕駛、機(jī)器學(xué)習(xí)、視頻云等業(yè)務(wù)場(chǎng)景。在IDC發(fā)布的《中國軟件定義存儲(chǔ)（SDS）2022年第一季度》報(bào)告顯示，金山云KingStorage OBS產(chǎn)品在SDS對(duì)象存儲(chǔ)市場(chǎng)細(xì)分領(lǐng)域，市場(chǎng)占有率位列前三，已躋身于國內(nèi)行業(yè)頭部。

以云為基的云原生存儲(chǔ)

金山云KingStorage混合云存儲(chǔ)產(chǎn)品是基于云原生的設(shè)計(jì)理念，定位于混合云、專有云、云化的企業(yè)數(shù)據(jù)中心和邊緣計(jì)算節(jié)點(diǎn)等場(chǎng)景，旨在為客戶提供彈性伸縮、軟硬解耦、資源隔離、隨需而用、敏捷高效、自動(dòng)化運(yùn)維的池化存儲(chǔ)資源。其主要特點(diǎn)有如下：

應(yīng)云而生 — 源自云：產(chǎn)品研發(fā)源于云用戶對(duì)數(shù)據(jù)存儲(chǔ)的多樣化需求，解決數(shù)據(jù)存儲(chǔ)在公有云和私有云中流轉(zhuǎn)的問題。

以云為基 — 興于云：產(chǎn)品基于公有云相同的存儲(chǔ)技術(shù)棧，并實(shí)現(xiàn)代碼共享，基于應(yīng)用場(chǎng)景差異提升企業(yè)級(jí)存儲(chǔ)的功能特性。

融云致遠(yuǎn) — 贏未來：面向云原生應(yīng)用對(duì)海量、高性能存儲(chǔ)的需求，強(qiáng)化與各類云原生平臺(tái)的平滑對(duì)接，助力云原生生態(tài)的繁榮。

KingStorage云原生的特質(zhì)有利于平滑對(duì)接多云平臺(tái)和滿足云原生類應(yīng)用的存儲(chǔ)需求，實(shí)現(xiàn)數(shù)據(jù)在多樣化應(yīng)用場(chǎng)景之間按需流轉(zhuǎn)，確保云上云下一致的存儲(chǔ)服務(wù)體驗(yàn)，加速業(yè)務(wù)創(chuàng)新和數(shù)字化轉(zhuǎn)型。

聚焦新興業(yè)務(wù)領(lǐng)域下的存儲(chǔ)痛點(diǎn)

在當(dāng)今新業(yè)務(wù)形態(tài)下，客戶對(duì)于存儲(chǔ)的核心需求主要有三點(diǎn)：第一是新業(yè)務(wù)場(chǎng)景對(duì)存儲(chǔ)的高性能需求，比如在自動(dòng)駕駛、機(jī)器學(xué)習(xí)、大數(shù)據(jù)分析等場(chǎng)景，高算力下的海量數(shù)據(jù)存儲(chǔ)性能日益成為制約業(yè)務(wù)發(fā)展的瓶頸。第二是業(yè)務(wù)數(shù)據(jù)的超大規(guī)模已是常態(tài)，而現(xiàn)有的存儲(chǔ)模式顯然難以滿足，比如基于開源存儲(chǔ)軟件的方案，會(huì)遇到節(jié)點(diǎn)規(guī)模擴(kuò)展后性能低遠(yuǎn)于預(yù)期、擴(kuò)展后難以符合設(shè)計(jì)預(yù)期、版本更新快且難于在線升級(jí)、運(yùn)維復(fù)雜等各類意想不到的問題。最后是要實(shí)現(xiàn)項(xiàng)目總體上的降本增效，業(yè)務(wù)數(shù)據(jù)要能夠做到線上線下按需流動(dòng)，充分享受云上計(jì)算和存儲(chǔ)資源的廉價(jià)。以自動(dòng)駕駛業(yè)務(wù)的需求為例，典型的以數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)量變的新產(chǎn)業(yè)，L4級(jí)自動(dòng)駕駛需要大約300PB~500PB的路采數(shù)據(jù)，但是更多的場(chǎng)景數(shù)據(jù)能提升模型的精準(zhǔn)度。此外，業(yè)務(wù)所需的高精地圖和測(cè)繪數(shù)據(jù)是涉密的，按照保密要求必須保持在合規(guī)的私有化環(huán)境中。而機(jī)器學(xué)習(xí)可按需按時(shí)采用公有云上大量的GPU服務(wù)器資源，同時(shí)需要云上和云下的數(shù)據(jù)互通來驅(qū)動(dòng)訓(xùn)練任務(wù)的開展。

大數(shù)據(jù)存算分離應(yīng)用場(chǎng)景實(shí)踐

隨著大數(shù)據(jù)應(yīng)用被越來越廣泛的應(yīng)用到互聯(lián)網(wǎng)企業(yè)、金融、運(yùn)營商等行業(yè)，并逐步成為業(yè)務(wù)發(fā)展的主要推動(dòng)力。這就帶來用戶數(shù)據(jù)量的指數(shù)級(jí)增長，數(shù)據(jù)的規(guī)模已經(jīng)突破之前的預(yù)期，這不僅帶來高額的成本，同時(shí)原有的數(shù)據(jù)存儲(chǔ)技術(shù)架構(gòu)也不能有效地支撐大數(shù)據(jù)業(yè)務(wù)，進(jìn)而影響到業(yè)務(wù)的創(chuàng)新。為了解決新業(yè)務(wù)形態(tài)下存儲(chǔ)模式面臨的挑戰(zhàn)，越來越多的客戶選擇了存算分離的方式。

存算分離需要解決用戶面臨的三大難題：業(yè)務(wù)運(yùn)行慢、系統(tǒng)維護(hù)難、存儲(chǔ)方案貴。首先，當(dāng)前采用的HDFS存儲(chǔ)的設(shè)計(jì)存在內(nèi)存占用高、使用粗粒度的全局鎖、以及對(duì)小文件的處理效率低、數(shù)據(jù)處理的過程出現(xiàn)延時(shí)高的問題。其次，HDFS存儲(chǔ)僅能支持?jǐn)?shù)億級(jí)別的文件數(shù)，超過之后一方面需要做深度優(yōu)化提升，另一方面是采用新的版本來提升對(duì)文件數(shù)的支持，而新版本的穩(wěn)定性通常比較差，帶來系統(tǒng)級(jí)的運(yùn)維難題。最后是HDFS的存算一體和三副本機(jī)制，使得存儲(chǔ)空間的利用率低于33%，且擴(kuò)容時(shí)必須計(jì)算節(jié)點(diǎn)和存儲(chǔ)節(jié)點(diǎn)放在一起，導(dǎo)致數(shù)據(jù)規(guī)模越大存儲(chǔ)方案需要的資金投入就越高。

金山云混合云存算分離解決方案，提供三種靈活的大數(shù)據(jù)對(duì)接模式：一是基于具備緩存加速能力的大數(shù)據(jù)存儲(chǔ)網(wǎng)關(guān)組件，二是采用定制優(yōu)化的Hadoop sdk對(duì)象存儲(chǔ)插件，三是使用標(biāo)準(zhǔn)的s3a協(xié)議，滿足不同應(yīng)用場(chǎng)景下大數(shù)據(jù)生態(tài)軟件對(duì)接存儲(chǔ)的性能和功能需求。其中大數(shù)據(jù)存儲(chǔ)網(wǎng)關(guān)組件，不僅兼容HDFS協(xié)議，還支持全局緩存和統(tǒng)一命名空間，提供彈性伸縮的數(shù)據(jù)存儲(chǔ)能力。對(duì)于計(jì)算類應(yīng)用，可以提供很好的數(shù)據(jù)本地化或加速數(shù)據(jù)I/0性能；對(duì)于后端的持久化存儲(chǔ)系統(tǒng)，可通過統(tǒng)一命名空間功能融合多套異構(gòu)的存儲(chǔ)系統(tǒng)，且對(duì)前端計(jì)算框架的使用做到透明。

通過在頭部商業(yè)銀行的交付實(shí)踐表明，金山云混合云存儲(chǔ)分離解決方案在性能、兼容性、成本、以及規(guī)?；瘮U(kuò)展能力等方面得到認(rèn)可，并在行內(nèi)廣泛推廣，促進(jìn)大數(shù)據(jù)類業(yè)務(wù)的創(chuàng)新和引領(lǐng)行業(yè)的技術(shù)發(fā)展趨勢(shì)。

機(jī)器學(xué)習(xí)應(yīng)用場(chǎng)景實(shí)踐

通過深入分析機(jī)器學(xué)習(xí)場(chǎng)景下各流程環(huán)節(jié)對(duì)存儲(chǔ)的需求點(diǎn)可以發(fā)現(xiàn)，用戶對(duì)存儲(chǔ)的需求有如下四點(diǎn)。首先是性能，即是否能以最快速度和最優(yōu)成本滿足自動(dòng)駕駛不同流程環(huán)節(jié)的數(shù)據(jù)高速讀寫的要求。第二是擴(kuò)展性，系統(tǒng)整體擴(kuò)展能力和擴(kuò)展的便捷性，決定了系統(tǒng)是否支撐未來2~3年的業(yè)務(wù)增長對(duì)存儲(chǔ)系統(tǒng)的容量需求。第三是云原生的需求，機(jī)器學(xué)習(xí)的場(chǎng)景下，一定會(huì)基于云原生平臺(tái)來構(gòu)建業(yè)務(wù)運(yùn)行體系，這就需要存儲(chǔ)系統(tǒng)提供CSI容器存儲(chǔ)接口(CSI：Container Storage Interface)插件，并且具備CSI存儲(chǔ)插件的高可用和故障自愈等能力，在確保數(shù)據(jù)安全性的同時(shí)，全面提升存儲(chǔ)服務(wù)的可用性。第四是成本因素，希望降低長期存儲(chǔ)運(yùn)營成本，實(shí)現(xiàn)冷熱數(shù)據(jù)的分離，冷數(shù)據(jù)的存儲(chǔ)成本能進(jìn)一步降低，優(yōu)化數(shù)據(jù)生命周期過程的每TB成本。

結(jié)合用戶的需求以及對(duì)存儲(chǔ)系統(tǒng)的長期實(shí)踐，金山云針對(duì)機(jī)器學(xué)習(xí)場(chǎng)景下推出三種混合云存儲(chǔ)解決方案，涵蓋文件存儲(chǔ)、對(duì)象存儲(chǔ)以及相應(yīng)的高性能存儲(chǔ)網(wǎng)關(guān)產(chǎn)品。一是為中小型客戶提供一體化文件存儲(chǔ)系統(tǒng)，完全具備支撐機(jī)器學(xué)習(xí)的功能特性和性能，并具備良好的性價(jià)比。二是針對(duì)性能有極高性能要求的用戶，金山云提供基于全閃存的文件存儲(chǔ)解決方案，性能上支持?jǐn)?shù)百GB的大吞吐量和亞毫秒級(jí)的低延時(shí)。三是面向泛互和公共服務(wù)領(lǐng)域的用戶，則推薦高性能存儲(chǔ)網(wǎng)關(guān)+大容量對(duì)象存儲(chǔ)的解決方案，構(gòu)建起存儲(chǔ)資源池，實(shí)現(xiàn)機(jī)器學(xué)習(xí)、大數(shù)據(jù)分析、云原生應(yīng)用數(shù)據(jù)的統(tǒng)一化存儲(chǔ)。

在金山云的項(xiàng)目實(shí)踐中，機(jī)器學(xué)習(xí)的數(shù)據(jù)量已超過百PB以上，主要是超大規(guī)模的視頻圖片類數(shù)據(jù)，并且每年保持著高速的增長。同時(shí)，該用戶內(nèi)部有很多關(guān)聯(lián)業(yè)務(wù)系統(tǒng)，對(duì)于在線日志保存、大數(shù)據(jù)分析、數(shù)據(jù)歸檔等都有存儲(chǔ)需求，更重要的是機(jī)器學(xué)習(xí)已成為驅(qū)動(dòng)主營業(yè)務(wù)的關(guān)鍵要素。金山云憑借本地對(duì)象存儲(chǔ)資源池加上高性能的存儲(chǔ)網(wǎng)關(guān)，提供了機(jī)器學(xué)習(xí)的整套存儲(chǔ)解決方案，解決存儲(chǔ)的性能瓶頸，降低運(yùn)營成本，幫助用戶實(shí)現(xiàn)了新業(yè)務(wù)的快速上線，并驅(qū)動(dòng)核心業(yè)務(wù)的不斷創(chuàng)新。

讓混合云存儲(chǔ)的特質(zhì)驅(qū)動(dòng)業(yè)務(wù)創(chuàng)新

為構(gòu)建數(shù)據(jù)驅(qū)動(dòng)型組織的核心競爭力，各行各業(yè)創(chuàng)新性地對(duì)業(yè)務(wù)進(jìn)行優(yōu)化和改造，提升業(yè)務(wù)敏捷性和服務(wù)化能力，同時(shí)選擇適合自身業(yè)務(wù)的數(shù)據(jù)存儲(chǔ)方式，來釋放海量數(shù)據(jù)的潛在價(jià)值，提升數(shù)據(jù)在業(yè)務(wù)間的流轉(zhuǎn)能力，并實(shí)現(xiàn)降本增效的目標(biāo)。作為中國云服務(wù)市場(chǎng)的領(lǐng)導(dǎo)者之一，金山云在混合云存儲(chǔ)產(chǎn)品與解決方案已得到金融、運(yùn)營商、泛互企業(yè)、公共服務(wù)等用戶端的正式商用和服務(wù)認(rèn)可，將持續(xù)幫助用戶解決在業(yè)務(wù)轉(zhuǎn)型過程中面臨的各種數(shù)據(jù)存儲(chǔ)挑戰(zhàn)，充分釋放數(shù)據(jù)價(jià)值，驅(qū)動(dòng)業(yè)務(wù)的高速增長。

金山云云存儲(chǔ)產(chǎn)品負(fù)責(zé)人表示：混合云存儲(chǔ)作為金山云存儲(chǔ)業(yè)務(wù)重點(diǎn)的發(fā)展方向，聚焦在云原生應(yīng)用、大數(shù)據(jù)分析、自動(dòng)駕駛、機(jī)器視覺等新型應(yīng)用場(chǎng)景。依托于公司的云存儲(chǔ)技術(shù)棧和云上存儲(chǔ)服務(wù)的業(yè)務(wù)實(shí)踐，結(jié)合企業(yè)級(jí)用戶在業(yè)務(wù)對(duì)接、安全合規(guī)、極簡運(yùn)維等方面的需求，金山云將不斷完善混合云存儲(chǔ)產(chǎn)品線，豐富功能特性，促進(jìn)云與端之間數(shù)據(jù)的互相流轉(zhuǎn)，讓混合云存儲(chǔ)的特質(zhì)惠及云上云下的用戶。

展望未來，金山云混合云存儲(chǔ)一方面將持續(xù)不斷地構(gòu)建高性能、高彈性、易運(yùn)維的產(chǎn)品核心競爭力，另一方面將與頭部用戶及行業(yè)ISV攜手共創(chuàng)，率先在業(yè)內(nèi)推出創(chuàng)新性的云原生存儲(chǔ)解決方案，攜手生態(tài)合作伙伴共同推進(jìn)混合云存儲(chǔ)市場(chǎng)規(guī)模的高速發(fā)展。