一聲巨響，數(shù)據(jù)中心應(yīng)聲倒下

羅馬尼亞一家銀行數(shù)據(jù)中心業(yè)務(wù)中斷了大約10個(gè)小時(shí)。原因是數(shù)據(jù)中心在對消防系統(tǒng)進(jìn)行測試時(shí)，打開了儲存有“煙烙盡”的鋼瓶，“煙烙盡”通過軟管和噴嘴均勻地噴灑在狹小空間、當(dāng)氣體通過噴嘴釋放時(shí)，壓力過大，在釋放“煙烙盡”時(shí)發(fā)出了異常大的巨響，巨響超過了130分貝，引起振動(dòng)，服務(wù)器和數(shù)據(jù)存儲設(shè)備都因此受到了影響，破壞了設(shè)備內(nèi)部部件，導(dǎo)致銀行的業(yè)務(wù)癱瘓。實(shí)際上，數(shù)據(jù)中心設(shè)備對噪聲也非常敏感，尤其是這種突然的巨響，很容易造成內(nèi)部電子元器件的失效。(專家點(diǎn)評：有必要在數(shù)據(jù)中心增加一些消聲設(shè)施，提供一個(gè)相對安靜的環(huán)境，有利于延長設(shè)備的使用壽命。)

一輛SUV汽車引發(fā)的慘劇

2007年11月位于美國達(dá)拉斯的Rackspace公司數(shù)據(jù)中心遇到了一場無妄之災(zāi)，一位大型四驅(qū)車司機(jī)，在開車途中由于糖尿病病發(fā)而出現(xiàn)短暫昏迷，汽車一路向前直沖，并從丁字路口處撞向路邊外側(cè)的護(hù)堤。護(hù)堤被撞擊后，沖向空中，并落在了Rackspace公司的數(shù)據(jù)中心建筑物上，恰好砸在了供電裝置上，一陣火光帶閃電之后，數(shù)據(jù)中心電力供應(yīng)中斷，使其業(yè)務(wù)在數(shù)小時(shí)內(nèi)陷入了癱瘓。Rackspace公司為此次事故向客戶支付了350萬美元賠償金，同時(shí)還增加了客戶流失的風(fēng)險(xiǎn)。(專家點(diǎn)評：數(shù)據(jù)中心需具備一定的抗震、抗撞、防火能力，避免遇到這樣的意外故障。)

颶風(fēng)吹停了數(shù)據(jù)中心發(fā)電機(jī)

2012年10月位于美國紐約曼哈頓地區(qū)的一處數(shù)據(jù)中心整套供電系統(tǒng)失效，原因是肆虐一時(shí)的颶風(fēng)桑迪襲擊了曼哈頓。在數(shù)據(jù)中心的十八層擺放了多臺備用發(fā)電機(jī)，用于持續(xù)提供電力且不至于受到洪水影響。但風(fēng)暴來襲時(shí)直接灌滿了該數(shù)據(jù)中心建筑的地下室，并且摧毀了應(yīng)急發(fā)電機(jī)的燃油泵送系統(tǒng)，遭到海水浸泡的整套電路立刻失去了作用，備用發(fā)電系統(tǒng)失效，而十八層電力采用的是市電，當(dāng)颶風(fēng)來襲造成整個(gè)曼哈頓市電系統(tǒng)故障，數(shù)據(jù)中心主備供電均故障，造成數(shù)據(jù)中心斷電，所有應(yīng)用系統(tǒng)無法運(yùn)行。

[[177704]]

太陽耀斑事件

1989年，太陽耀斑定向瞄準(zhǔn)了加拿大魁北克水電電網(wǎng)，導(dǎo)致電網(wǎng)電壓振蕩，造成跳閘保護(hù)設(shè)備啟用，某個(gè)核電站的發(fā)電機(jī)升壓變壓器***損壞，無法提供服務(wù)。太陽耀斑是一種最劇烈的太陽活動(dòng)，周期約為11年，通過高速度產(chǎn)生強(qiáng)磁場的過程中發(fā)出的帶電粒子，對于數(shù)據(jù)中心和電網(wǎng)是一個(gè)毀滅性的災(zāi)難。這屬于小概率事件，但一旦發(fā)生，對數(shù)據(jù)中心就是致命一擊。

天災(zāi)之下，數(shù)據(jù)中心人員是束手無策，還是能夠有所作為?故障突然發(fā)生的一刻，運(yùn)維人員是否真的能在最短時(shí)間內(nèi)有效地完成故障處理?系統(tǒng)是否真的能如預(yù)案中快速恢復(fù)?這些都是對數(shù)據(jù)中心故障處理能力的實(shí)際考量。良好的培訓(xùn)和完善的應(yīng)急預(yù)案及演練將有助于意外事件的應(yīng)對。

災(zāi)難恢復(fù)演練

以農(nóng)業(yè)銀行***全行參與的數(shù)據(jù)中心信息系統(tǒng)業(yè)務(wù)級災(zāi)難恢復(fù)演練為例，包括事件響應(yīng)、預(yù)警準(zhǔn)備、系統(tǒng)恢復(fù)、業(yè)務(wù)驗(yàn)證和總結(jié)回退等5個(gè)階段，10分鐘內(nèi)完成了總分行災(zāi)難恢復(fù)人員集結(jié);在75分鐘內(nèi)恢復(fù)了公共應(yīng)用、內(nèi)部核算、單折、銀行卡、客戶信息、聯(lián)行、現(xiàn)金管理、庫房現(xiàn)金及表外等9大類核心業(yè)務(wù)，并通過了全國36家分行營業(yè)網(wǎng)點(diǎn)的業(yè)務(wù)驗(yàn)證，業(yè)務(wù)驗(yàn)證成功率為99.94%。

未雨綢繆，多手準(zhǔn)備

桑迪颶風(fēng)之后，發(fā)現(xiàn)許多企業(yè)并沒對燃料供應(yīng)鏈有足夠的關(guān)注。數(shù)據(jù)中心災(zāi)難計(jì)劃把備用發(fā)電機(jī)作為重中之重：當(dāng)燃料被耗盡之前，所有的工程項(xiàng)目和技術(shù)、系統(tǒng)都可以表現(xiàn)得很好，直到柴油燃料被悲劇般地耗盡了……。

即使企業(yè)能夠獲得燃料供應(yīng)商的支持，他們也要防止在需要的時(shí)候遭遇災(zāi)害事故引起的交通癱瘓問題。這些問題可能會(huì)在其他情況下發(fā)生，如地震、颶風(fēng)、龍卷風(fēng)造成的重大民用基礎(chǔ)設(shè)施損害。而我們從桑迪颶風(fēng)中所汲取到的一個(gè)關(guān)鍵的教訓(xùn)便是，需要在燃料的供應(yīng)鏈冗余、地理和備用運(yùn)輸路線方面投入更多的關(guān)注。

人員培訓(xùn)

當(dāng)發(fā)生天災(zāi)時(shí)，人員的冗余問題固然是必需的，這樣不會(huì)造成單一某一個(gè)人成為企業(yè)操作的關(guān)鍵，但是一旦發(fā)生百年難遇的特大災(zāi)難時(shí)，事前安排N+1個(gè)人可能也是不夠的。像發(fā)生桑迪這樣的災(zāi)難時(shí)，更廣泛的交叉培訓(xùn)將幫助數(shù)據(jù)中心解決很大的難題。