數(shù)據(jù)中心里包含有大量的IT設(shè)備,運(yùn)轉(zhuǎn)系統(tǒng)非常復(fù)雜,經(jīng)常會(huì)出現(xiàn)這樣那樣的故障,就算一些著名的互聯(lián)網(wǎng)巨頭的數(shù)據(jù)中心也無(wú)法幸免。當(dāng)然,數(shù)據(jù)中心可以通過(guò)部署很多備份技術(shù),保證在出現(xiàn)故障時(shí)不至于影響運(yùn)行的業(yè)務(wù)。數(shù)據(jù)中心故障產(chǎn)生的原因多種多樣,絕大多數(shù)故障讓人很容易理解,也可以通過(guò)采取一些補(bǔ)救措施,避免日后再出現(xiàn),而有些數(shù)據(jù)中心故障產(chǎn)生的原因就非常怪異,讓人二丈和尚摸不到頭腦,故障的原因都有些無(wú)厘頭,本文就來(lái)講述幾例怪異的數(shù)據(jù)中心故障。聽(tīng)到導(dǎo)致數(shù)據(jù)中心故障的這些原因,腦洞大開(kāi),只能感嘆數(shù)據(jù)中心故障防不勝防啊!
一聲巨響,數(shù)據(jù)中心應(yīng)聲倒下
就在9月,一家羅馬尼亞銀行數(shù)據(jù)中心業(yè)務(wù)中斷了大約10個(gè)小時(shí)。數(shù)據(jù)中心在對(duì)消防系統(tǒng)進(jìn)行測(cè)試時(shí),打開(kāi)了儲(chǔ)存有“煙烙盡”的鋼瓶,“煙烙盡”通過(guò)軟管和噴嘴均勻地噴灑在狹小空間,從而達(dá)到滅火功效。當(dāng)氣體通過(guò)噴嘴釋放時(shí),壓力過(guò)大,在釋放“煙烙盡”,最后發(fā)出了異常大的巨響,巨響超過(guò)了130分貝。這樣巨響引起了振動(dòng),結(jié)果聲音傳遞到存儲(chǔ)在數(shù)據(jù)中心硬盤(pán)的外殼???????服務(wù)器和數(shù)據(jù)存儲(chǔ)設(shè)備都受到了影響,破壞了設(shè)備內(nèi)部部件。這導(dǎo)致銀行的信用卡交易、ATM業(yè)務(wù)活動(dòng)、在線(xiàn)銀行、電子郵件和銀行的官方網(wǎng)站都癱瘓掉了。我們經(jīng)常抱怨數(shù)據(jù)中心機(jī)房?jī)?nèi)的噪聲太大,對(duì)人來(lái)說(shuō)太吵了,對(duì)里面的設(shè)備又何嘗不是,這些設(shè)備長(zhǎng)期忍受各種設(shè)備運(yùn)行產(chǎn)生噪聲的影響。實(shí)際上,這些設(shè)備本身對(duì)噪聲也是比較敏感,尤其是這種突然的巨響,很容易造成??部??子??器件的失效,所以有必要在數(shù)據(jù)中心增加一些消聲設(shè)施,人長(zhǎng)期處在嘈雜的環(huán)境中都會(huì)煩躁,電子設(shè)備也一樣,提供一個(gè)相對(duì)安靜的環(huán)境,有利于延長(zhǎng)設(shè)備的使用壽命。
一輛SUV汽車(chē)引發(fā)的數(shù)據(jù)中心慘劇
2007年11月位于美國(guó)達(dá)拉斯的Rackspace公司數(shù)據(jù)中心遇到了一場(chǎng)無(wú)妄之災(zāi),故障使其業(yè)務(wù)在數(shù)小時(shí)內(nèi)陷入了癱瘓。一位大型四驅(qū)車(chē)司機(jī),由于糖尿病病發(fā)而出現(xiàn)短暫昏迷,當(dāng)時(shí)他正在開(kāi)車(chē),汽車(chē)一路向前直沖,并從丁字路口處撞向路邊外側(cè)的護(hù)堤。護(hù)提被撞擊后,沖向空中,并落在了Rackspace公司的數(shù)據(jù)中心建筑物上,恰好砸在了供電裝置上,一陣火光帶閃電之后,數(shù)據(jù)中心電力供???????中斷了。此類(lèi)極為罕見(jiàn)的外來(lái)因素所導(dǎo)致的停機(jī)事故,Rackspace公司為此次事故向客戶(hù)支付了350萬(wàn)美元賠償金,同時(shí)還增加了客戶(hù)流失的風(fēng)險(xiǎn)。數(shù)據(jù)中心建筑物可抗擊八級(jí)地震,卻沒(méi)有抵住一輛SUV汽車(chē)的誤撞,確切地說(shuō)還不是直接撞擊。數(shù)據(jù)中心有很多的內(nèi)外通道,這些管道也一定要保護(hù)好,具有一定的抗震、抗撞、防火能力,避免遇到這樣的意外故障。
颶風(fēng)吹停了數(shù)據(jù)中心發(fā)電機(jī)
2012年10月位于美國(guó)紐約曼哈頓地區(qū)的一處數(shù)據(jù)中心整套供電系統(tǒng)失效,原因是肆虐一時(shí)的颶風(fēng)桑迪襲擊了曼哈頓。在數(shù)據(jù)中心的十八層擺放有用于持續(xù)提供電力且不至于受到洪水影響的多臺(tái)備用發(fā)電機(jī),但風(fēng)暴來(lái)襲時(shí)直接灌滿(mǎn)了該數(shù)據(jù)中心建筑的地下室,并且摧毀了應(yīng)急發(fā)電機(jī)的燃油泵送系統(tǒng),遭到海水浸泡的整套電路立刻失去了作用,備用發(fā)電系統(tǒng)失效,而十八層電力采用???????是市電,當(dāng)颶風(fēng)來(lái)襲造成整個(gè)曼哈頓市電系統(tǒng)故障,數(shù)據(jù)中心主備供電均故障,造成數(shù)據(jù)中心斷電,所有應(yīng)用系統(tǒng)無(wú)法運(yùn)行。
太陽(yáng)耀斑事件
在1989年太陽(yáng)耀斑定向瞄準(zhǔn)了加拿大魁北克水電電網(wǎng),導(dǎo)致電網(wǎng)電壓振蕩,造成跳閘保護(hù)設(shè)備啟用,幾乎造成東北地區(qū)電力協(xié)調(diào)委員會(huì)(NPCC)和中大西洋區(qū)議會(huì)(MAAC)崩潰。Public Service Gas & Electric旗下新澤西州的一個(gè)核電站,造成發(fā)電機(jī)升壓變壓器的永久性損壞,無(wú)法提供服務(wù)。雖然強(qiáng)烈的太陽(yáng)耀斑/日冕物質(zhì)拋射比較罕見(jiàn),但不可否認(rèn)它對(duì)于數(shù)據(jù)中心和電網(wǎng)是一個(gè)毀滅性的災(zāi)難????太陽(yáng)耀斑是一種最劇烈的太陽(yáng)活動(dòng),周期約為11年,通過(guò)高速度產(chǎn)生強(qiáng)磁場(chǎng)的過(guò)程中發(fā)出的帶電粒子,如果擊中地球,就會(huì)產(chǎn)生令人驚嘆的現(xiàn)象,同時(shí)肆虐電力系統(tǒng),如果擊中數(shù)據(jù)中心的供電系統(tǒng),數(shù)據(jù)中心一定吃不消了,這屬于小概率事件,但一旦發(fā)生就是致命的。早在1859年,曾經(jīng)發(fā)生過(guò)一次太陽(yáng)耀斑故障,即所謂卡林頓事件,這次太陽(yáng)耀斑讓全球的電報(bào)系統(tǒng)都失控。太陽(yáng)耀斑拋射定期發(fā)生,如果從這些太陽(yáng)系列活動(dòng)沖擊數(shù)據(jù)中心磁場(chǎng),數(shù)據(jù)中心可能會(huì)遇到大范圍的電涌和停電。
巨響、撞擊、颶風(fēng)、太陽(yáng)耀斑等都給數(shù)據(jù)中心帶來(lái)了災(zāi)難,平時(shí)我們很少聽(tīng)到這類(lèi)故障,主要是這些故障發(fā)生的概率極低,甚至讓人覺(jué)得發(fā)生這些故障非常怪異。不過(guò)小概率并不等于不會(huì)發(fā)生。我們知道,按照發(fā)生概率來(lái)講,飛機(jī)是非常安全的一種交通工具,但是每年還是會(huì)發(fā)生墜機(jī)事故,和每年數(shù)千萬(wàn)次的航班數(shù)量相比,發(fā)生概率不到萬(wàn)分之一,可一旦發(fā)生就是造成嚴(yán)重的???????員傷亡,這讓我們不得不對(duì)這些小概率事件非常謹(jǐn)慎。一旦這樣的故障發(fā)生到某一個(gè)數(shù)據(jù)中心身上,也許這個(gè)數(shù)據(jù)中心就會(huì)從地球上消失。這些導(dǎo)致故障的根源很多時(shí)候還是可以通過(guò)優(yōu)化加以避免,比如:對(duì)于撞擊,我們可以對(duì)數(shù)據(jù)中心外圍和建筑組樓頂進(jìn)行加固,避免撞擊給數(shù)據(jù)中心帶來(lái)傷害;對(duì)于巨響,我們可以在數(shù)據(jù)中心機(jī)房外部增加消聲裝置,增加建筑物墻體厚度,???樣???僅???以防止噪聲進(jìn)入數(shù)據(jù)中心機(jī)房?jī)?nèi)部,對(duì)設(shè)備造成傷害,還可以避免內(nèi)部設(shè)備運(yùn)行產(chǎn)生的噪聲向外傳遞,以免擾民。所以,針對(duì)這些怪異的數(shù)據(jù)中心故障原因,通過(guò)采用一些常規(guī)的防護(hù)措施,就可以避免。

