自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

華為分享HPC下的大數(shù)據(jù)存儲(chǔ)技術(shù)

企業(yè)動(dòng)態(tài)
12月5日至6日,華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)閃耀亮相2013英特爾高性能計(jì)算技術(shù)峰會(huì)。近日,華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)在標(biāo)準(zhǔn)性能評(píng)估機(jī)構(gòu)SPEC的SPECsfs2008基準(zhǔn)測(cè)試中再次刷新記錄,成為業(yè)界第一。華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)正是用于解決高性能計(jì)算下的大數(shù)據(jù)存儲(chǔ)瓶頸、數(shù)據(jù)安全以及數(shù)據(jù)全生命周期管理問(wèn)題的最佳大數(shù)據(jù)存儲(chǔ)平臺(tái)。

 華為攜創(chuàng)新型OceanStor 9000大數(shù)據(jù)存儲(chǔ)產(chǎn)品參加“2013英特爾高性能計(jì)算技術(shù)峰會(huì)”。本次大會(huì)由英特爾主辦,主題為“綠色計(jì)算 應(yīng)用驅(qū)動(dòng)“,50多家國(guó)內(nèi)***的高性能計(jì)算研究機(jī)構(gòu),近200名專(zhuān)家、學(xué)者、行業(yè)代表與英特爾高管與技術(shù)專(zhuān)家一同出席了本次峰會(huì)。與會(huì)專(zhuān)家通過(guò)主題演講分享了高性能計(jì)算(以下簡(jiǎn)稱(chēng)HPC)前沿技術(shù)與創(chuàng)新成果,通過(guò)專(zhuān)業(yè)論壇深入探討了HPC當(dāng)前的技術(shù)熱點(diǎn)與趨勢(shì),并進(jìn)行了多形式的學(xué)術(shù)交流。

本次峰會(huì)參與單位涵蓋國(guó)家超算中心,各省市超算中心,中科院、華大基因、生命科學(xué)院等若干高性能計(jì)算研究機(jī)構(gòu),以及清華,北大等10多家國(guó)內(nèi)名校。陣容強(qiáng)大,堪稱(chēng)國(guó)內(nèi)高性能計(jì)算研究領(lǐng)域的重要盛會(huì)。

中國(guó)石油東方地球物理公司研究院處理中心總工程師賴(lài)能和提到:“當(dāng)今的高性能計(jì)算遇到了諸多問(wèn)題,如多處理器協(xié)同工作,CPU+GPU模式的能耗管理,但是最重要的還在于大數(shù)據(jù)應(yīng)用中遇到的存儲(chǔ)瓶頸和數(shù)據(jù)安全問(wèn)題。”

本次大會(huì),華為參展的OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)正是用于解決高性能計(jì)算下的大數(shù)據(jù)存儲(chǔ)瓶頸、數(shù)據(jù)安全以及數(shù)據(jù)全生命周期管理問(wèn)題的***大數(shù)據(jù)存儲(chǔ)平臺(tái)。近日,華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)在標(biāo)準(zhǔn)性能評(píng)估機(jī)構(gòu)SPEC的SPECsfs2008基準(zhǔn)測(cè)試中再次刷新記錄。評(píng)測(cè)結(jié)果顯示, 華為OceanStor 9000僅使用100個(gè)節(jié)點(diǎn),在NFS網(wǎng)絡(luò)共享協(xié)議環(huán)境下的性能值就達(dá)到了驚人的5,030,264 OPS,成為業(yè)界***,領(lǐng)先友商產(chǎn)品3倍多。華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)可以支持288個(gè)節(jié)點(diǎn),實(shí)現(xiàn)靈活的擴(kuò)展能力,提供“scale-out”式的性能和容量線性擴(kuò)展能力,200GB/s系統(tǒng)帶寬可以滿(mǎn)足高性能計(jì)算集群在大數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)交換上的帶寬需求。

固態(tài)硬盤(pán)、Infiniband互聯(lián)技術(shù)這些HPC領(lǐng)域的關(guān)鍵技術(shù),也成為本次峰會(huì)上的重要議題,而此類(lèi)前沿技術(shù)在華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)上也均有體現(xiàn)。OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)提供的高性能節(jié)點(diǎn),帶有4款華為自研的固態(tài)硬盤(pán),系統(tǒng)可以實(shí)現(xiàn)冷熱數(shù)據(jù)的自動(dòng)遷移,以保證計(jì)算系統(tǒng)能最快的獲取數(shù)據(jù)。并且支持Infiniband組網(wǎng)方式,同時(shí)提供了廉價(jià)的基于10GE+RDMA的組網(wǎng)。通過(guò)充分利用RDMA等功能,使得傳統(tǒng)意義上認(rèn)為高時(shí)延的IP總線具備可以媲美IB低延時(shí)能力。

相對(duì)于大數(shù)據(jù)來(lái)說(shuō),高性能計(jì)算在很多行業(yè)用戶(hù)中都得到了較早的部署與應(yīng)用,在軟硬件一體化平臺(tái)、數(shù)據(jù)存儲(chǔ)等方面為大數(shù)據(jù)應(yīng)用打下良好的基礎(chǔ)。特別是高性能計(jì)算和大數(shù)據(jù)在內(nèi)在邏輯上是相通的,在平臺(tái)擴(kuò)展、應(yīng)用落地等方面具有互補(bǔ)優(yōu)勢(shì),這就滿(mǎn)足了高性能計(jì)算和大數(shù)據(jù)進(jìn)行融合的充分性條件。OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)正是這一思想的踐行者。它提供了對(duì)數(shù)據(jù)的分析檢索接口,高性能計(jì)算集群系統(tǒng)可以利用該接口將原有的數(shù)據(jù)分析任務(wù),下移到存儲(chǔ)系統(tǒng)執(zhí)行,從而降低上層計(jì)算系統(tǒng)的運(yùn)算壓力。對(duì)于采用Hadoop計(jì)算框架的高性能計(jì)算集群,在原有Hadoop系統(tǒng)中,一級(jí)存儲(chǔ)的數(shù)據(jù)需手動(dòng)從計(jì)算集群遷移到二級(jí)存儲(chǔ),過(guò)程復(fù)雜繁瑣;二級(jí)存儲(chǔ)數(shù)量龐大,難于管理。另外這種大量數(shù)據(jù)的遷移,不僅耗時(shí),對(duì)計(jì)算網(wǎng)絡(luò)也造成很大的負(fù)擔(dān)。OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng) X位一體的思路對(duì)于這種用Hadoop計(jì)算框架的應(yīng)用而言,尤其有益。采用OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)作為存儲(chǔ)系統(tǒng)的高性能計(jì)算系統(tǒng)可免除跨設(shè)備數(shù)據(jù)的裝載、遷移,不僅降低了管理成本,也降低了設(shè)備采購(gòu)成本。

責(zé)任編輯:林琳 來(lái)源: 51CTO.com
相關(guān)推薦

2017-02-23 10:27:59

2012-06-08 09:46:26

大數(shù)據(jù)

2016-02-29 15:09:54

戴爾云計(jì)算

2014-06-26 16:57:31

HPCISC’14華為

2016-11-08 17:38:55

華為HPC

2016-10-13 09:52:53

大數(shù)據(jù)搜索技術(shù)

2013-05-29 10:07:34

大數(shù)據(jù)存儲(chǔ)技術(shù)

2014-04-22 13:17:23

綜合布線布線技術(shù)

2012-09-06 10:52:25

華為MVX大數(shù)據(jù)存儲(chǔ)

2014-04-16 10:31:06

石油勘探HPC華為

2015-04-08 10:58:13

綜合布線大數(shù)據(jù)

2020-11-20 14:15:23

大數(shù)據(jù)數(shù)據(jù)存儲(chǔ)

2012-09-05 16:08:31

大數(shù)據(jù)存儲(chǔ)HCC2012華為云計(jì)算大會(huì)

2013-08-08 10:07:43

大數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)化數(shù)據(jù)

2016-09-29 12:59:54

大數(shù)據(jù)采集系統(tǒng)

2012-09-05 17:45:03

存儲(chǔ)系統(tǒng)大數(shù)據(jù)華為

2018-03-20 10:37:33

存儲(chǔ)大數(shù)據(jù)管理

2017-07-13 11:13:18

大數(shù)據(jù)數(shù)據(jù)存儲(chǔ)

2022-09-01 23:34:18

大數(shù)據(jù)數(shù)據(jù)分析工具

2011-07-27 16:11:11

HadoopMapReduceMPP
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)