白駒過隙,時(shí)光荏苒。2020年對(duì)于我們所有人來說都是不平凡的一年。我們見證了COVID-19疫情的肆虐,也體會(huì)了戰(zhàn)疫中科技的能量。不僅應(yīng)對(duì)疫情,科技同時(shí)在改變著我們疫后生活、工作的方式,這其中,數(shù)據(jù)的存儲(chǔ)和管理,也呈現(xiàn)出更多的新態(tài)勢(shì),需要我們?nèi)リP(guān)注并給與及時(shí)應(yīng)對(duì)。
1. (靜態(tài)和動(dòng)態(tài)數(shù)據(jù))分層安全的重要性日益提高。
超大規(guī)模軟件生態(tài)系統(tǒng)不斷發(fā)展,使得企業(yè)和站點(diǎn)在不具備基礎(chǔ)設(shè)施所需聯(lián)網(wǎng)能力的情況下,也能夠在較小的“原子單元”上開發(fā)和部署應(yīng)用。越來越多的云原生應(yīng)用在全球各地的聯(lián)網(wǎng)點(diǎn)或托管設(shè)施上運(yùn)行。企業(yè)必須在流程的每一步對(duì)數(shù)據(jù)進(jìn)行保護(hù),在更加分布式的部署模式中妥善保護(hù)用戶靜態(tài)和動(dòng)態(tài)數(shù)據(jù)。
給企業(yè)領(lǐng)導(dǎo)者的建議:在許多行業(yè)中,為防止來自內(nèi)、外部的各種威脅,靜態(tài)數(shù)據(jù)加密逐漸成為強(qiáng)制性要求。也許今天在您所處的行業(yè)中靜態(tài)數(shù)據(jù)加密還不是一項(xiàng)強(qiáng)制性要求,但將來終歸會(huì)如此。因此,希捷建議您未雨綢繆,盡快采用加密硬盤,以確保不會(huì)造成業(yè)務(wù)中斷。
2. 企業(yè)更廣泛地采用對(duì)象存儲(chǔ)。
隨著數(shù)據(jù)的爆炸式增長(zhǎng),對(duì)象存儲(chǔ)開始成為大容量存儲(chǔ)的標(biāo)配。相較于傳統(tǒng)的文件存儲(chǔ)而言,對(duì)象存儲(chǔ)具有諸多優(yōu)勢(shì),包括規(guī)范性元數(shù)據(jù)、可擴(kuò)展性和無分層數(shù)據(jù)結(jié)構(gòu)。系統(tǒng)得益于數(shù)據(jù)集蘊(yùn)含的更高智能,而對(duì)象存儲(chǔ)恰能夠提供這種智能。存儲(chǔ)類型包括塊存儲(chǔ)、文件存儲(chǔ)和對(duì)象存儲(chǔ)。對(duì)于對(duì)性能十分敏感的許多任務(wù)關(guān)鍵型應(yīng)用來說,塊存儲(chǔ)至關(guān)重要;文件存儲(chǔ)多年來一直服務(wù)于傳統(tǒng)應(yīng)用,并可提供可靠的架構(gòu);而對(duì)象存儲(chǔ)則側(cè)重于新應(yīng)用的開發(fā),它可以與塊存儲(chǔ)相結(jié)合,以共生的方式提升系統(tǒng)規(guī)模和性能。許多傳統(tǒng)文件應(yīng)用也在向?qū)ο蟠鎯?chǔ)基礎(chǔ)設(shè)施遷移,以充分利用其提供的規(guī)模效益。
給企業(yè)領(lǐng)導(dǎo)者的建議:由于具備較高的經(jīng)濟(jì)效率和可擴(kuò)展性,對(duì)象存儲(chǔ)正在迅速成為事實(shí)上的大容量存儲(chǔ)標(biāo)準(zhǔn),以快速補(bǔ)充和取代文件存儲(chǔ)。此外,新畢業(yè)的程序員越來越多地基于對(duì)象存儲(chǔ)接口來構(gòu)建工作流程。我們應(yīng)該多聘用這樣的人才。如果您尚未將對(duì)象存儲(chǔ)引入自己的數(shù)據(jù)中心,那么現(xiàn)在是時(shí)候采取行動(dòng)了。
3. 可組合系統(tǒng)日益普遍。
將系統(tǒng)劃分為獨(dú)立單元,讓它們能夠與其他獨(dú)立單元進(jìn)行組合,這并不是新想法,但是在開源的基礎(chǔ)上廣泛采用可組合系統(tǒng)才剛剛起步。Kubernetes是一個(gè)開源系統(tǒng),用于自動(dòng)部署、擴(kuò)展和管理容器化應(yīng)用,是上述發(fā)展趨勢(shì)的核心。開源是應(yīng)用開發(fā)的未來,因?yàn)樗軌蜃尭鼜V泛的社區(qū)攜手解決許多行業(yè)共同面臨的挑戰(zhàn),并允許通過開放式架構(gòu)部署特定領(lǐng)域解決方案。將硬件進(jìn)行組合以便更好地滿足軟件或業(yè)務(wù)需求,是一個(gè)必然的發(fā)展方向。
給企業(yè)領(lǐng)導(dǎo)者的建議:今天的數(shù)據(jù)中心正朝著可組合的方向發(fā)展,因?yàn)樗梢愿虞p松地部署及重新部署資源,而無需先驗(yàn)配置以及計(jì)算、內(nèi)存和存儲(chǔ)之間的靜態(tài)配置比率。容器和Kubernetes是可組合系統(tǒng)的核心機(jī)制,所有數(shù)據(jù)中心都應(yīng)該著手采用這些技術(shù),如果它們還沒有采用的話。
4. 分層部署大容量存儲(chǔ)(將熱數(shù)據(jù)放在閃存上,而所有其他數(shù)據(jù)放在硬盤上)。
英偉達(dá)GPU設(shè)計(jì)將內(nèi)存劃分為不同的層級(jí)(寄存器、共享內(nèi)存和全局內(nèi)存),每一層有不同的屬性。寄存器延遲較低,內(nèi)存較小;全局內(nèi)存延遲較高,提供更大內(nèi)存。英偉達(dá)提供了一個(gè)軟件界面,使用戶可以充分利用分級(jí)內(nèi)存和根據(jù)該架構(gòu)優(yōu)化的各種解決方案。同樣,SSD和HDD也可以處于不同的層級(jí)。我們創(chuàng)建了太多有價(jià)值的數(shù)據(jù),采用同構(gòu)存儲(chǔ)策略無法提高效率。
那么分級(jí)存儲(chǔ)為什么重要呢?全部由高性能存儲(chǔ)設(shè)備組成的存儲(chǔ)系統(tǒng)成本會(huì)比預(yù)期高;而全部由大容量存儲(chǔ)設(shè)備組成的存儲(chǔ)系統(tǒng)性能又達(dá)不到要求。于是,分級(jí)存儲(chǔ)應(yīng)運(yùn)而生:這種方式可以在成本和性能間取得最佳平衡。隨著其他存儲(chǔ)技術(shù)(例如存儲(chǔ)級(jí)內(nèi)存)的不斷出現(xiàn),我們迫切需要能夠從各級(jí)存儲(chǔ)中提取最大價(jià)值的架構(gòu)。
給企業(yè)領(lǐng)導(dǎo)者的建議:如果預(yù)算無限充足,數(shù)據(jù)中心可以全部采用成本高昂的存儲(chǔ)介質(zhì)。然而遺憾的是,成本的現(xiàn)實(shí)打碎了幻想,我們不得不進(jìn)行分級(jí)存儲(chǔ):熱數(shù)據(jù)保存在高成本、高性能的介質(zhì)上,而訪問頻率較低的數(shù)據(jù)則放在經(jīng)濟(jì)實(shí)用的大容量存儲(chǔ)介質(zhì)上。幸運(yùn)的是,數(shù)據(jù)中心軟件越來越擅長(zhǎng)識(shí)別熱數(shù)據(jù)和冷數(shù)據(jù),并進(jìn)行相應(yīng)的遷移。如果您的數(shù)據(jù)中心尚未采用異構(gòu)存儲(chǔ)介質(zhì),那么您有可能損失了存儲(chǔ)性能,或者付出了高昂的存儲(chǔ)成本。
5. 形成性人工智能提升數(shù)據(jù)的可用性。
不僅數(shù)據(jù)的創(chuàng)建呈爆炸式增長(zhǎng),有用數(shù)據(jù)量也在迅猛增長(zhǎng);甚至由于人工智能/機(jī)器學(xué)習(xí)(AI/ML)的進(jìn)步使得用戶能夠從已經(jīng)歸檔的數(shù)據(jù)中獲取更多信息,已歸檔數(shù)據(jù)也開始被激活。企業(yè)領(lǐng)導(dǎo)者必須做好準(zhǔn)備存儲(chǔ)比以往任何時(shí)候都要多的數(shù)據(jù),用于訓(xùn)練各種模型,以便挖掘重要信息;同時(shí)由于數(shù)據(jù)的使用壽命有可能會(huì)延長(zhǎng),也要準(zhǔn)備歸檔更多數(shù)據(jù)。形成性人工智能是一種使數(shù)據(jù)變得更具洞察性的手段。Gartner將形成性人工智能定義為“一種能夠動(dòng)態(tài)變化以響應(yīng)具體情況的人工智能”。IDC將形成性人工智能視為“各種新興人工智能及相關(guān)技術(shù)的總稱,它可以根據(jù)情況的變化而動(dòng)態(tài)變化。”由于依賴于能夠智能地響應(yīng)變化的靈活架構(gòu),形成性人工智能與分級(jí)存儲(chǔ)趨勢(shì)緊密相關(guān)。您在監(jiān)控人工智能模型時(shí)有可能會(huì)收到信號(hào)說它發(fā)生了偏離。此時(shí),您可以使用另外一個(gè)模型在硬盤層上搜索適當(dāng)?shù)挠?xùn)練數(shù)據(jù),并將這些數(shù)據(jù)自動(dòng)移動(dòng)到閃存層,以加快訓(xùn)練速度。硬盤層也可能是對(duì)象存儲(chǔ),因此也與對(duì)象存儲(chǔ)發(fā)展趨勢(shì)有關(guān)。其優(yōu)點(diǎn)既在于速度(因?yàn)閿?shù)據(jù)會(huì)自動(dòng)移動(dòng)到快速存儲(chǔ)層),也在于成本(因?yàn)槟梢詫?shù)據(jù)以易于訪問的形式存儲(chǔ)在高性價(jià)比的硬盤上,以備需要時(shí)調(diào)用)。