在會(huì)上Jeremy Arnold向大家詳細(xì)介紹了在Cloud IaaS 2016中的云計(jì)算基準(zhǔn)測(cè)試指標(biāo)，及制定這些指標(biāo)的原因。Steve Realmuto就云計(jì)算基準(zhǔn)測(cè)試的具體內(nèi)容和測(cè)試方法向大家做了詳細(xì)介紹。

SPEC對(duì)云計(jì)算的觀點(diǎn)

首先，Jeremy Arnold在綜合介紹云計(jì)算、公有云、私有云與混合云后，向大家介紹了開(kāi)放系統(tǒng)組(OSG)對(duì)云計(jì)算的觀點(diǎn)：白盒云(Whitebox Cloud)與黑盒云(Blackbox Cloud)。

Jeremy Arnold(SPECpower架構(gòu)師)

白盒云(Whitebox Cloud)

白盒云一般來(lái)說(shuō)，就是私有云。白盒云的用戶(hù)可以知道所有的軟件和硬件信息。比較像在一個(gè)典型的Benchmark環(huán)境中看到得那樣，用戶(hù)把軟件和硬件組合到一起，在這環(huán)境里面可以控制所有的事情。這與私云環(huán)境比較類(lèi)似，你對(duì)軟件和硬件的配置會(huì)有一些控制權(quán)。

黑盒云(Blackbox Cloud)

黑盒云，它一般來(lái)說(shuō)是公有云的結(jié)構(gòu)。比如說(shuō)亞馬遜和谷歌的云，但它也有可能是一個(gè)托管的私有云。你可以來(lái)充分的使用云里面的資源，你也可以來(lái)購(gòu)買(mǎi)云里面的時(shí)長(zhǎng)，可以來(lái)購(gòu)買(mǎi)云供應(yīng)商的各種服務(wù)，你知道可以用什么樣的資源，但是你其實(shí)并不清楚這個(gè)云是如何被管理的，也不清楚它里面到底涵蓋哪一些資源。它其實(shí)就是一個(gè)黑盒子或者黑匣子，其實(shí)你不知道里面是什么。

云計(jì)算需要什么樣的測(cè)試

無(wú)論是軟、硬件的信息都了解的白盒云還是對(duì)所有信息都一無(wú)所知的黑盒云，我們都想要對(duì)它去進(jìn)行測(cè)量，測(cè)量什么?或者說(shuō)云的Benchmark測(cè)試是什么呢?在SPEC的研究組委員會(huì)里面，對(duì)云計(jì)算有兩個(gè)不同的測(cè)試Benchmark “Scalability”和“Elasticity”。

Scalability可以看作在山上不斷的攀登，也就是說(shuō)云可以持續(xù)不斷的處理各種需求，我們不斷來(lái)增加的Workload，這就稱(chēng)作Scalability。

Elasticity是指隨著我們不斷的在云上增加越來(lái)越多的Workload，它的Scalability仍然是一致的。它的性能不會(huì)隨著Workload的增加，而有所降低。

在公共云上會(huì)有各種各樣的資源，可以把它稱(chēng)作***、無(wú)窮的，但仍然會(huì)有限值。比如說(shuō)你采用的某一虛擬機(jī)，Scalability會(huì)在一定的范圍內(nèi)會(huì)達(dá)到一個(gè)限值。當(dāng)然我們可以在公有云環(huán)境中，通過(guò)增添虛擬機(jī)的數(shù)量使處理能力不斷提升(增加Elasticity)，但這樣做的成本也會(huì)不斷的攀升。同時(shí)還需要考慮性能的差異性。公有云中有其他租戶(hù)在不同時(shí)間使用云計(jì)算資源時(shí)，也會(huì)對(duì)用戶(hù)虛擬機(jī)Scalability造成不同的影響。

從另一方面來(lái)說(shuō)，在私有云方面，我們獲得非常好的Elasticity，你可以控制每一件事情，這樣的話就確保Scalability不會(huì)有所改變，即使隨著Workload的增加，Scalability也不會(huì)有所改變，在私有云里面，你會(huì)對(duì)環(huán)境會(huì)有較多的控制權(quán)，這是跟公共云相比的。但是我們?cè)谒接性评锩嬉彩且紤]性能。

如何正確評(píng)估一個(gè)云，如何才能使Scalability與Elasticity更具實(shí)際意義。這也許是一個(gè)很大挑戰(zhàn)，包括SPEC云委員會(huì)以外的成員，都會(huì)覺(jué)得這是一個(gè)挑戰(zhàn)，有時(shí)候Benchmark相當(dāng)于是在一個(gè)黑匣子的環(huán)境里面。你如何能夠做出這樣的Benchmark?你如何能夠把它跟其他的事情進(jìn)行對(duì)比?當(dāng)云計(jì)算環(huán)境進(jìn)行工作的時(shí)候，工作的性能也需要得以測(cè)量。我們有時(shí)候會(huì)說(shuō)，我們想要關(guān)注于云本身，而不是Workload上面，但是我們?nèi)匀恍枰?從Workload去評(píng)估云本身。

Cloud IaaS 2016 Benchmark要做的就是可以在任何一個(gè)云計(jì)算資源上進(jìn)行測(cè)量，同時(shí)把這結(jié)果進(jìn)行一個(gè)文件編撰。在這測(cè)試過(guò)程中，云的本身不會(huì)被改變。但是我們希望還是有一個(gè)初始配置的Elasticity來(lái)做為評(píng)估的基準(zhǔn)。并且在未來(lái)，我們會(huì)設(shè)計(jì)更多的Workload測(cè)評(píng)方法，來(lái)應(yīng)對(duì)云計(jì)算技術(shù)快速發(fā)展。所以說(shuō)這個(gè)Benchmark會(huì)不斷的進(jìn)行調(diào)整，在未來(lái)我們看新的Cloud IaaS Benchmark，會(huì)有新的Workload在這上面。

Scalability與Elasticity的評(píng)估方式

接下來(lái)由Steve Realmuto向我們介紹了SPEC Cloud IaaS 2016 Benchmark有關(guān)于Scalability與Elasticity的評(píng)估方式。

Steve Realmuto(Oracle/SPEC開(kāi)放系統(tǒng)組(OSG)主席)

Cloud IaaS 2016測(cè)試基準(zhǔn)基于YCSB(Yahoo Cloud Serving Benchmark)+Cassandra分布式數(shù)據(jù)庫(kù)，Cassandra由Facebook開(kāi)發(fā)，在各個(gè)運(yùn)營(yíng)商中的應(yīng)用十分廣泛。而且，OSG cloud小組進(jìn)行了大量的調(diào)整，例如在原有的YCSB基準(zhǔn)中，數(shù)據(jù)庫(kù)的讀寫(xiě)操作比例為7:3，Cloud IaaS 2016的讀寫(xiě)比例調(diào)整為95:5，這樣比例更符合實(shí)際應(yīng)用場(chǎng)景。

SPEC Cloud_IaaS可以模擬多種I/O和CPU密集型云計(jì)算工作負(fù)載，模擬標(biāo)準(zhǔn)社交媒體NoSol數(shù)據(jù)庫(kù)應(yīng)用場(chǎng)景，對(duì)云計(jì)算軟、硬件產(chǎn)品的多種性能指標(biāo)進(jìn)行Benchmark測(cè)試。協(xié)助用戶(hù)更加全向的對(duì)云計(jì)算產(chǎn)品進(jìn)行深入了解。同時(shí)也可以協(xié)助云計(jì)算廠商，對(duì)自身產(chǎn)品進(jìn)行完善，盡量減少現(xiàn)實(shí)運(yùn)營(yíng)過(guò)程中，云計(jì)算系統(tǒng)故障的發(fā)生。

SPEC Cloud IaaS在設(shè)計(jì)時(shí)充分考慮了不同用戶(hù)的技術(shù)水平，既可以實(shí)現(xiàn)測(cè)試環(huán)境的自動(dòng)部署及運(yùn)行，自主測(cè)試及輸出測(cè)試報(bào)告，也可以依據(jù)用戶(hù)特殊需求手動(dòng)配置運(yùn)行環(huán)境，既適合一般大型客戶(hù)及研究機(jī)構(gòu)使用，也可以滿(mǎn)足中小型企業(yè)的測(cè)試需求。

欲了解首屆SPEC亞洲峰會(huì)更多信息，請(qǐng)點(diǎn)擊http://www.zdnet.com.cn/spec/2016

SPECSPEC 2016

10月27—28日來(lái)SPEC 2016亞洲峰會(huì)，聽(tīng)關(guān)于計(jì)算性能、能效測(cè)試模型和規(guī)范的權(quán)威解讀。