自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

數(shù)據(jù)中心的計算和存儲要「分家」?

新聞 大數(shù)據(jù)
到底為什么需要Diskless架構?Diskless架構能發(fā)揮怎樣的優(yōu)勢?

本文轉自雷鋒網,如需轉載請至雷鋒網官網申請授權。

為了突破算力的瓶頸,AI芯片領域探索計算和存儲融合,寄希望于存算一體帶來的變革。

同樣是為了實現(xiàn)更好性能,滿足靈活性需求,數(shù)據(jù)中心卻要將兩大核心要素計算和存儲解耦,或者通俗理解為分家。

中國計算機學會(CCF)信息存儲技術專委會主任舒繼武表示:“算力的多樣化,高速網絡、低時延介質等底層技術的發(fā)展,讓數(shù)據(jù)中心從以CPU為中心的緊耦合架構,走向以數(shù)據(jù)為中心的存算分離的Diskless架構演進。

Diskless架構將服務器本地盤拉遠,構成Diskless的服務器和遠端存儲池,將原有架構的多級分層資源徹底解耦池化和重組整合,實現(xiàn)各類硬件的獨立擴展及靈活共享。

那到底為什么需要Diskless架構?Diskless架構能發(fā)揮怎樣的優(yōu)勢?

傳統(tǒng)數(shù)據(jù)中心架構面臨哪些挑戰(zhàn)?

傳統(tǒng)數(shù)據(jù)中心體系架構是典型的多級分層架構,從服務器到網絡到存儲,每一層都是獨立圍繞CPU、內存、總線、硬盤等組件構成的完整計算機系統(tǒng)。當新的數(shù)據(jù)應用出現(xiàn)的時候,為了快速部署新業(yè)務,企業(yè)通常采用最簡單的應用與本地盤耦合的服務器一體化架構。

然而,計算、存儲等硬件資源發(fā)展速度不均衡,算力生命周期和數(shù)據(jù)生命周期的差異越來越大,導致傳統(tǒng)IT架構存在的擴展不靈活、資源閑置、利用率低下等問題顯現(xiàn)。

數(shù)據(jù)中心的計算和存儲要「分家」?

天翼云高性能網絡首席架構師樊小平表示,“比如CPU升級的周期是2-3年,存儲的周期更長。但因為傳統(tǒng)存算融合的數(shù)據(jù)中心架構下,CPU和存儲固定的配比沒有辦法單獨升級CPU或存儲。”

傳統(tǒng)存算一體服務器架構實際面臨容量利用率三大挑戰(zhàn):存儲資源利用率低;性能可靠性與資源利用率難以兼得;擴展性差,帶來運維、成本問題。

數(shù)據(jù)中心的計算和存儲要「分家」?

同時,還有數(shù)據(jù)中心三大稅帶來算力和IO效率挑戰(zhàn)。

首先,CPU處理流程很復雜,要進行網絡/存儲IO的處理,要消耗30%的算力,這被稱之為主力計算稅。其次,存儲系統(tǒng)仍為CPU 為中心的架構,數(shù)據(jù)路徑無法直通盤,時延增加20%,這就是存儲算力稅。最后,存儲協(xié)議面向HDD介質設計,協(xié)議厚重,協(xié)議處理導致帶寬下降10%,這又有了存儲協(xié)議稅。

“從應用的角度,現(xiàn)在有很多應用,其中的應用容器要求最好能夠不依賴服務器,能做到靈活部署和數(shù)據(jù)共享。同時,還希望按需實現(xiàn)細粒度 (fine granularity)資源分配?!笔胬^武說,“應用容器化帶來計算和存儲資源靈活部署、數(shù)據(jù)全局共享的強烈訴求。”

除了應用對傳統(tǒng)數(shù)據(jù)中心架構帶來了新的挑戰(zhàn),計算、網絡、存儲技術的發(fā)展將催生新的架構。

具體而言,算力方面,CPU依舊可以再傳統(tǒng)的Web應用、數(shù)據(jù)庫等場景發(fā)揮作用,GPU在圖形處理、深度學習處理等領域有優(yōu)勢,新興的DPU可以卸載網絡、存儲、安全功能。數(shù)據(jù)中心的算力朝著多樣化方向發(fā)展,按需運行并滿足用戶業(yè)務多種需求,這時候,算力池化是必然選擇。

網絡層面,低時延內存網絡的發(fā)展,加速服務器內存與性能盤的Disaggregate池化。網絡技術的發(fā)展,提高了系統(tǒng)資源池化的能力范國,特別是可促使內存資源池化。

存儲也有新的趨勢,新型分布式應用催生了輕量、高效的共享存儲系統(tǒng)發(fā)展,有效支撐了傳統(tǒng)數(shù)據(jù)中心架構朝極簡分層的新型存算分離架構演進。

數(shù)據(jù)中心的計算和存儲要「分家」?

于是,在應用的推動下,在算力、網絡和存儲技術發(fā)展的新趨勢下,多種因素共同催生了數(shù)據(jù)中心新的架構Diskless。

數(shù)據(jù)中心Diskless架構有哪些特點和關鍵技術?

由中國計算機學會(CCF)信息存儲專委會主編,天翼云、中國電子云、中科馭數(shù)、華為等十余家企業(yè)聯(lián)合撰寫的《數(shù)據(jù)中心Diskless架構》白皮書提到,Diskless架構突破了傳統(tǒng)以通用CPU為中心的處理邏輯,使數(shù)據(jù)處理等CPU不擅長的任務被專用加速器、DPU等替代,實現(xiàn)能效比最優(yōu)的硬件組合。

數(shù)據(jù)中心的計算和存儲要「分家」?

具體看,全新的數(shù)據(jù)中心Diskless架構主要分為三大部份:

  • 新型盤/框存儲:介質、芯片和系統(tǒng)深度協(xié)同的極簡、大存力存儲,替代本地盤實現(xiàn)數(shù)據(jù)共享。
  • 高通量數(shù)據(jù)總線:高性能、低時延的遠程數(shù)據(jù)訪問總線,解決磁盤拉遠的訪問時延。
  • 高效數(shù)據(jù)處理算力:實現(xiàn)網存協(xié)同,數(shù)據(jù)處理卸載、加速,提升10處理效率和性能。

舒繼武進一步解釋,在新型盤/框存儲部份,介質、芯片和系統(tǒng)做了深度的、極簡的融合,把算力和存儲解耦,形成數(shù)據(jù)的共享。極簡的特性和功能包括糾刪碼、壓縮等。

要真正做到高效的共享,網絡是很關鍵。數(shù)據(jù)中心Diskless架構中的高通量數(shù)據(jù)總線,有CXL、PCIE、NoF等,可以解決磁盤共享之后訪問的時延,以降低時延。

在算力部份,由于數(shù)據(jù)中心Diskless架構計算和存儲的解耦,數(shù)據(jù)中心中的各種類型的芯片,比如CPU、GPU、DPU都能充分發(fā)揮自身的優(yōu)勢,靈活滿足應用的需求。

還有非常重要的一點,Diskless架構也能很好滿足新型分布式Serverless的應用。

由此,也能看出Diskless架構涉及五大關鍵技術:

一、場景化數(shù)據(jù)縮減,也就是針對不同場景的數(shù)據(jù)特征,可使用不同的數(shù)據(jù)縮減技術;

二、數(shù)控分離,數(shù)據(jù)bypass CPU,從智能網卡、DPU直通到盤,建極簡的快速數(shù)據(jù)訪問路徑;

三、盤芯協(xié)同,盤芯片和控制器芯片的深度融合,提高集成度,達到最低成本;

四、高通量網絡,存算模組問通過CXL Fabric、NoF、IP等多協(xié)議網絡實現(xiàn)高性能數(shù)據(jù)交換;

五、網存協(xié)同,智能網卡和DPU的硬件加速,實現(xiàn)高效的數(shù)據(jù)協(xié)同處理。

數(shù)據(jù)中心的計算和存儲要「分家」?

Diskless架構的優(yōu)勢和挑戰(zhàn)是什么?

新的數(shù)據(jù)中心Diskless架構對于那些應用更有優(yōu)勢呢?華為閃存存儲領域副總裁吳偉舉了三個典型例子,首先是云和互聯(lián)網場景,當中非常重要的虛擬化技術,引入Diskless架構以后,對云和計算過程中解決不了的問題,解決不好的問題,可以幫助其解決。

還有數(shù)據(jù)庫、大數(shù)據(jù),冷熱數(shù)據(jù)分級的問題,現(xiàn)在的業(yè)務都要提供大內存,提供一些接口,還有軟件的處理,Diskless架構通過專用的存儲替代本地盤,計算存儲獨立擴展,可以避免投資浪費,節(jié)省成本。

第三個場景是大多數(shù)的云場景,特別是云場景中的容器。新的業(yè)務場景,傳統(tǒng)的存算一體的架構無法適應容器彈性的伸縮、敏捷特性。Diskless架構可以通過外置存儲將上一層的容器和下一層的存儲進行分離。

Diskless 架構優(yōu)勢突出,但作為新提出的架構也難免面臨挑戰(zhàn)。

舒繼武提到,“構建Diskless 架構系統(tǒng),面臨技術、生態(tài)方面的挑戰(zhàn),內存訪問語義、網存協(xié)同存儲語義都還處于探索階段,如何與現(xiàn)有生態(tài)應用協(xié)同,需要產業(yè)界、學術界專家共同探索解決?!?/p>

數(shù)據(jù)中心的計算和存儲要「分家」?

雷峰網認為,Diskless架構作為一個新興的架構,還需要像華為、西部數(shù)據(jù)、美光等盤框型廠商的支持,也需要系統(tǒng)型廠商的共同推動,《數(shù)據(jù)中心Diskless架構》白皮書發(fā)布會上國內DPU公司的集體支持,也更讓人對Diskless架構的未來充滿期待。

責任編輯:張燕妮 來源: 雷鋒網
相關推薦

2015-12-08 17:38:10

數(shù)據(jù)中心溫度濕度

2014-02-13 09:03:15

數(shù)據(jù)中心云計算

2013-05-23 13:15:23

網絡存儲網絡融合InfiniBand網

2022-12-09 16:53:40

2015-06-18 13:12:05

數(shù)據(jù)中心數(shù)據(jù)感知存儲

2015-09-23 11:27:14

數(shù)據(jù)中心存儲性能

2016-06-01 15:07:57

數(shù)據(jù)中心

2015-11-12 16:28:49

數(shù)據(jù)中心存儲網絡

2017-10-30 14:38:32

2017-11-21 11:03:32

2017-11-21 09:15:51

2022-09-28 15:07:32

存儲數(shù)據(jù)中心云計算

2018-07-18 10:18:01

數(shù)據(jù)中心負荷計算系統(tǒng)

2024-12-10 13:14:54

2023-11-27 10:46:37

2018-10-28 15:33:29

邊緣計算數(shù)據(jù)中心網絡

2022-07-06 13:55:57

數(shù)據(jù)中心云計算存儲

2017-02-27 21:30:29

數(shù)據(jù)中心光纖電纜

2009-04-03 15:05:47

MTBFAFR計算

2019-02-15 15:19:42

數(shù)據(jù)中心存儲硬件
點贊
收藏

51CTO技術棧公眾號