自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

騰訊云存儲(chǔ)論文入選行業(yè)頂會(huì)NAS2024,面向AIGC等場景加速數(shù)據(jù)訪問

存儲(chǔ) 存儲(chǔ)軟件
GooseFS構(gòu)建了高性能SSD緩存池,為計(jì)算節(jié)點(diǎn)提供存儲(chǔ)端的緩存支持,以提高面對(duì)順序IO時(shí)的吞吐率,解決了對(duì)象存儲(chǔ)介質(zhì)性能不足的問題。

12月3日消息,NAS2024大會(huì)公布了今年會(huì)議論文的收錄情況。騰訊云存儲(chǔ)就加速對(duì)象存儲(chǔ)訪問提出技術(shù)方案的論文《GooseFS:分布式緩存服務(wù)以提高云對(duì)象存儲(chǔ)性能》入選。

NAS(網(wǎng)絡(luò)、架構(gòu)和存儲(chǔ))大會(huì) 由 IEEE TCDP 和 IEEE 計(jì)算機(jī)學(xué)會(huì)共同贊助,是基礎(chǔ)技術(shù)領(lǐng)域最頂級(jí)的行業(yè)大會(huì)之一。會(huì)議為網(wǎng)絡(luò)、架構(gòu)、存儲(chǔ)等基礎(chǔ)技術(shù)領(lǐng)域提供大量高質(zhì)量的研究論文和研究成果,具有重要的學(xué)術(shù)價(jià)值和行業(yè)引導(dǎo)意義。今年的NAS大會(huì)(NAS2024)于11 月 29 日至 12 月 1 日在廣州舉行。

對(duì)象存儲(chǔ)由于具備高水平擴(kuò)展性和低成本等特征,目前已經(jīng)成了用戶首選的海量數(shù)據(jù)存儲(chǔ)解決方案。但隨著大數(shù)據(jù)分析、AIGC等涉及海量數(shù)據(jù)計(jì)算的場景快速發(fā)展,對(duì)象存儲(chǔ)由于其數(shù)據(jù)組織和實(shí)現(xiàn)方式限制,以及其存儲(chǔ)介質(zhì)時(shí)延和吞吐性能的制約,在應(yīng)對(duì)這類工作負(fù)載時(shí),面臨著嚴(yán)重的性能挑戰(zhàn)。

在論文中,騰訊云提出基于對(duì)象存儲(chǔ)搭建分布式高性能文件系統(tǒng)GooseFS,引入三個(gè)關(guān)鍵設(shè)計(jì),來實(shí)現(xiàn)在存算分離架構(gòu)下對(duì)對(duì)象存儲(chǔ)的加速訪問,從而解決上述問題。

具體而言,在計(jì)算端,GooseFS將離計(jì)算資源更近的本地盤作為緩存介質(zhì)存放部分對(duì)象存儲(chǔ)數(shù)據(jù),實(shí)現(xiàn)計(jì)算對(duì)數(shù)據(jù)的就近訪問,降低延遲,同時(shí)通過多級(jí)粒度緩存管理和短路讀機(jī)制降低了隨機(jī)小IO下的數(shù)據(jù)訪問時(shí)延。

在存儲(chǔ)端,GooseFS構(gòu)建了高性能SSD緩存池,為計(jì)算節(jié)點(diǎn)提供存儲(chǔ)端的緩存支持,以提高面對(duì)順序IO時(shí)的吞吐率,解決了對(duì)象存儲(chǔ)介質(zhì)性能不足的問題。

同時(shí),GooseFS自研了一套高性能元數(shù)據(jù)引擎,通過元數(shù)據(jù)分級(jí)管理、強(qiáng)一致性緩存和平行擴(kuò)展等技術(shù)手段來提升元數(shù)據(jù)讀寫性能,并將元數(shù)據(jù)持久化到底層的企業(yè)級(jí)數(shù)據(jù)庫中,以此大幅提升了元數(shù)據(jù)處理的效率。

實(shí)驗(yàn)結(jié)果表明,相比原生對(duì)象存儲(chǔ),GooseFS的吞吐量提升了8~10倍,同時(shí)降低了90%的存儲(chǔ)帶寬消耗,滿足了多種工作負(fù)載對(duì)高性能要求。

目前,GooseFS 已經(jīng)服務(wù)了蔚來、博世、百川、高途、燃數(shù)、酷狗等一大批客戶。

責(zé)任編輯:張誠
相關(guān)推薦

2024-12-04 09:02:59

2022-06-13 16:55:28

騰訊云數(shù)據(jù)庫

2024-05-16 16:17:00

騰訊云數(shù)據(jù)庫

2024-07-18 21:21:29

2024-04-08 13:47:21

騰訊云存儲(chǔ)云存儲(chǔ)AIGC

2021-09-02 10:15:50

計(jì)算平臺(tái)MaxCompute 阿里云

2021-05-24 17:02:40

數(shù)字化

2022-07-12 10:37:08

阿里巴巴達(dá)摩院機(jī)器學(xué)習(xí)

2022-08-29 11:44:20

網(wǎng)絡(luò)阿里云數(shù)據(jù)中心

2009-01-30 11:41:30

2024-05-17 10:54:51

2022-05-20 15:28:25

3D算法

2021-08-04 16:06:15

數(shù)字化

2022-06-23 12:12:31

達(dá)摩院自動(dòng)駕駛
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)