一、數(shù)據(jù)中心市電失電的應急處理預案

為進一步加強數(shù)據(jù)中心用電管理工作，提升數(shù)據(jù)中心應對突發(fā)市電失電事件的應急反應速度和處置能力，快速、高效處理停電事件，最大限度減少市電停電對數(shù)據(jù)中心運營帶來的影響，確保數(shù)據(jù)中心基礎設施安全、有效運營，特制訂此預案。

應急處置預案啟動條件：全部市電停電且停電時間超過15分鐘仍未恢復，全部市電停電，是指數(shù)據(jù)中心所屬市電全部供電電源進線未事先聲明的、非檢修、突發(fā)性事故或遭人為破壞等原因?qū)е峦ｋ姟?/p>

應急方案執(zhí)行原則如下：

1、沉著、冷靜，緊密配合，團結(jié)協(xié)作。

2、當啟動應急預案時，需及時通知進駐各業(yè)務單位做好啟用網(wǎng)元應急方案的準備。

3、先聯(lián)系確認停電原因與時間，再確定應采取的進一步方法與步驟。

4、先確認設備當前狀態(tài)，再進行下一步操作。

5、在進行相關(guān)應急保障操作時，先進行操作，后接打問詢電話進行解釋、說明。

應急處理流程如下：

1、確認單路或全部市電停電。直流操作電源告警聲響、一般照明燈熄滅、事故照明燈處于電池放電照明狀態(tài)，或動環(huán)監(jiān)控值班人員電話通知時，應立即檢查各高壓輸入柜的電壓表電壓指示，確認是否處于單路或全部市電停電狀態(tài)。

2、通訊聯(lián)系。確認單路或全部市電停電后，值班人員應協(xié)同配合，按照應急預案采取應急措施。應急處置完畢后，應及時與本地區(qū)供電公司電話聯(lián)系，通話時應問清停電的路由、原因、范圍、預計停電時長，以及對方的姓名，以備日后記錄和查詢。及時通知應急保障小組成員及總協(xié)調(diào)人進行故障上報，通知數(shù)據(jù)中心入駐單位做好采取進一步措施的準備。

3、應急物資

（1）應急照明設備

（2）高低壓配電系統(tǒng)結(jié)構(gòu)圖

（3）設備維護手冊

（4）各種柜門鑰匙

4、應急處置流程（以雙路市電停電，高壓油機單邊送電，低壓聯(lián)絡自投自復為例）

（1）確認雙路停電，市電進線斷路器跳閘。

（2）檢查油機自啟后并機是否成功。

（3）如并機不成功需排除故障，完成手動并機。

（4）油機并機成功，將單邊高壓油機進線斷路器搖到合閘位，合高壓油機進線斷路器。

（5）將市電進線斷路器搖出。

（6）高壓操作結(jié)束，檢查油機運行狀態(tài)，記錄相應數(shù)據(jù)，同時電話詢問供電公司停電原因及時長。

（7）檢查低壓配電設備聯(lián)動是否正常，設備是否運行正常。

（8）檢查空調(diào)系統(tǒng)冷水機組、水泵及末端空調(diào)是否工作正常。

（9）檢查油庫油位，是否需要通知供油單位及時補充燃料。

應急人員安排及聯(lián)系方式如下：

維護人員聯(lián)系方式

廠家工程師聯(lián)系方式

二、數(shù)據(jù)中心滅火應急處置預案

為進一步加強數(shù)據(jù)中心安全管理工作，提升數(shù)據(jù)中心基礎設施維護團隊應對突發(fā)火災事件的應急反應速度和處置能力，及時、高效處置事件，最大限度減少突發(fā)情況對數(shù)據(jù)中心造成的損失，保障數(shù)據(jù)中心的安全、有效運營，特制訂此預案。

應急處置預案啟動條件：數(shù)據(jù)中心總監(jiān)控室接到火災報警（包括設備報警和人為報警），并現(xiàn)場確認為火警后，立即啟動“數(shù)據(jù)中心滅火應急處置預案”。

應急處置預案執(zhí)行原則如下：

1、 “以人為本，安全第一”原則。在應急處置過程中，最優(yōu)先的目標和最重要的舉措是保證人身安全，包括應急隊伍的自身安全。

2、“第一響應，快速處置”原則。在數(shù)據(jù)中心火災事故發(fā)生后，必須在極短的時間內(nèi)就地做出應急反應，在造成嚴重后果之前采取有效的防護、急救和疏散等措施。

3、“統(tǒng)一指揮，統(tǒng)一協(xié)調(diào)”原則。在應急處置過程中，數(shù)據(jù)中心各工作組、各單位必須服從應急處置現(xiàn)場指揮組的統(tǒng)一指揮協(xié)調(diào)，統(tǒng)一號令，步調(diào)統(tǒng)一，令行禁止。

4、“預防為主，平戰(zhàn)結(jié)合”原則。堅持數(shù)據(jù)中心突發(fā)火災事件應急與預防工作相結(jié)合，重點加強數(shù)據(jù)中心安全隱患排查，做好預防、預警、預報和常態(tài)下應急準備、應急隊伍建設、應急演練等工作，確保應急預案的科學性、規(guī)范性和可操作性。

應急處置調(diào)度機制：當數(shù)據(jù)中心發(fā)生異常情況時，應按照“逐級上報，統(tǒng)一指揮”的處置調(diào)度機制執(zhí)行，當直接上級無法聯(lián)絡時，應在2分鐘內(nèi)越級上報。

應急處置組織機構(gòu)如下：

總指揮：xxx

現(xiàn)場指揮組組長：xxx

現(xiàn)場指揮工作組：xxx

現(xiàn)場協(xié)調(diào)滅火組組長：xxx

中控指揮組組長：xxx

設備組組長：xxx

疏散組組長：xxx

氣體滅火啟動組組長：xxx

數(shù)據(jù)中心報警程序和接警處置程序如下：

1、無論任何人員，發(fā)現(xiàn)數(shù)據(jù)中心火災應立即撥打“119”電話，報告公安消防部門。

2、報警時講清楚以下幾個內(nèi)容：

（1）報警人的姓名、地址、工作單位、聯(lián)系電話。

（2）失火的準確地理位置。

（3）能夠了解失火的情況，如起火時間、燃燒特征、火勢大小、有無被困人員、有無重要物品、失火周圍有何重要建筑、行車路線、消防車和消防隊員如何方便地進入或接近火災現(xiàn)場等等。

（4）耐心回答“119”接警人員的詢問。

（5）打完電話，應組織人員到各個路口等待消防車的到來，以便引導消防車和消防隊員快速進入火災現(xiàn)場。

3、監(jiān)控室保衛(wèi)人員接到警報后，應立即采取以下措施：

（1）組織義務消防隊趕赴現(xiàn)場，并及時通知事故發(fā)生部位的人員或電工切斷著火部位的電源。

（2）通知相關(guān)人員迅速聚集，按預定程序和措施組織疏散和撲救，并立即向有關(guān)領導報告。

（3）值班人員在火災事故期間，嚴格控制出入車輛和人員。

4、應急疏散組織程序和措施。數(shù)據(jù)中心在發(fā)生火災時，要以人員疏散為主。先疏散被火勢圍困的人員，其次進行火勢周圍的物資疏散，同時要注意疏散人員自己的安全。消防隊到達火災現(xiàn)場后，應聽從公安消防人員的指揮進行疏散工作。

5、撲救初期火災的程序和措施如下：

（1）安全保衛(wèi)人員在接到火警后，應迅速趕往失火地點，聽從消防安全負責人的統(tǒng)一指揮實施滅火，防止火勢蔓延。

（2）安全保衛(wèi)人員發(fā)現(xiàn)有人員被火勢圍困，應先救人，后滅火，如發(fā)現(xiàn)有易燃易爆危險物品受到火勢威脅時，應迅速組織人員將易燃危險物品轉(zhuǎn)移到安全地點。

（3）如起火物為化學藥品或易燃易爆危險物品時，應在確定無爆炸危險的情況下，用干粉滅火器、沙子等物品進行撲救，用火將周圍的可燃物品淋濕，但嚴禁用水撲救化學藥品或易燃易爆危險物品火災；如不能確定有無爆炸危險的，應在安全地點做好準備，等待消防部門的指揮人員的調(diào)令和火災現(xiàn)場總指揮的命令。

（4）在公安消防隊到達火災現(xiàn)場后，應聽從公安消防部門指揮人員的指揮，配合滅火工作。

6、通信聯(lián)絡、安全防護、救護的程序和措施。通信聯(lián)絡的程序和措施如下：

（1）發(fā)生火災后，安全保衛(wèi)人員或值班人員應第一時間立即通知領導及消防安全責任人和消防安全管理人員到達火災現(xiàn)場。

（2）根據(jù)總指揮的指令，及時將破拆、停電、供水、車輛調(diào)配等滅火指令傳達到火災現(xiàn)場。

（3）將火場的進展情況及時反饋，保障火災現(xiàn)場與外界的信息暢通和尋求相鄰單位支援的聯(lián)絡工作。

安全防護的程序和措施如下：

（1）發(fā)生火災后，安全保衛(wèi)人員應首先控制車輛和無關(guān)人員進入火災現(xiàn)場。

（2）派一名人員到路口引導消防車和消防隊員快速進入火災現(xiàn)場。

（3）火災撲滅后，要全面檢查現(xiàn)場，消滅遺留火種，并派人保護好火災現(xiàn)場，等待公安消防部門的監(jiān)督檢查，協(xié)助對火災現(xiàn)場進行調(diào)查。

救護的程序和措施如下：如有人受傷或中毒，應根據(jù)傷勢情況及時處理，必要時撥打“120”救護。

應急處置聯(lián)系表

注：所有參與滅火人員均將對講機調(diào)整至統(tǒng)一頻道。

三、空調(diào)設備故障應急處置預案

為了確保機房空調(diào)系統(tǒng)安全運行，建立健全空調(diào)系統(tǒng)設備故障保障和恢復應急工作機制，提高應對設備突發(fā)故障的組織指揮能力和應急處置能力，滿足突發(fā)故障下機房空調(diào)系統(tǒng)工作正常和恢復工作的需要，特制定機房空調(diào)故障應急處置預案。

應急方案啟動條件：機房空調(diào)系統(tǒng)出現(xiàn)故障，導致機房局部產(chǎn)生高溫，將會對其他業(yè)務產(chǎn)生影響，造成數(shù)據(jù)設備運行不正常時，立即啟動“空調(diào)設備故障應急處理預案”。

應急方案執(zhí)行原則如下：

1、空調(diào)設備故障應急處置預案，要堅持統(tǒng)一指揮、分級負責、快速反應、保障有力，堅持先搶通、后修復的原則。

2、出現(xiàn)空調(diào)設備重要故障時，值班人員要在5分鐘內(nèi)逐級上報主管領導和相關(guān)維護人員，相關(guān)主管和維護人員不得擅離崗位，隨時保持通信暢通。

3、維護人員嚴格遵循空調(diào)設備維護和故障處理的規(guī)范要求，熟悉故障緊急處理流程，熟練掌握操作步驟和方法，在處理故障時應盡量縮短障礙時間。

4、處理空調(diào)設備故障時，深入查看和分析空調(diào)設備告警日志，根據(jù)告警內(nèi)容來確定故障處理的方向。

5、對處理完畢的空調(diào)設備故障，事后必須做故障分析，查清故障原因，確定故障性質(zhì)和責任，采取防范措施，避免同類故障再次發(fā)生。

網(wǎng)絡/設備/系統(tǒng)現(xiàn)狀：配套空調(diào)系統(tǒng)設備主要包括10臺10KV高壓離心冷水機組及其配套設施、380V離心冷水機組5臺及其配套設施、屋頂15臺開式冷卻塔及其配套設施、冷凍水型機房專業(yè)空調(diào)318臺等組成。

破壞原因及破壞結(jié)果分析：空調(diào)設備突發(fā)故障，包括空調(diào)本身設備故障、人為原因造成空調(diào)故障，將導致機房溫度升高不能滿足數(shù)據(jù)設備運行的環(huán)境需要，嚴重影響設備的正常工作。

預防保障措施如下：

（1）加強機房空調(diào)設備的預防性維護工作，定期查看和分析空調(diào)設備的運行參數(shù)、告警內(nèi)容，掌握空調(diào)設備運行情況。

（2）嚴格按照空調(diào)維護作業(yè)計劃，定期查看空調(diào)設備告警是否正常，及時發(fā)現(xiàn)、排除空調(diào)設備運行隱患。

（3）加強技術(shù)骨干人員的學習和培訓，提高業(yè)務技能水平，保證應急情況下空調(diào)設備故障的及時處理。

（4）做好空調(diào)設備的測試儀表、應急備品備件儲備管理，保證應急處置故障時搶修工作順利進行。

應急措施如下：

（1）機房空調(diào)設備發(fā)生一般故障時，值班人員立即通知維護主管進行處理，保證在3個小時內(nèi)處理完畢。

（2）如果空調(diào)冷機或者管路故障，啟動備用空調(diào)工作，安排維護人員在3小時內(nèi)更換故障器件或者疏通管路，處理完畢冷機和管路問題。

（3）機房空調(diào)設備發(fā)生重大故障后，值班人員發(fā)現(xiàn)異常情況后在5分鐘內(nèi)及時逐級上報領導和啟動故障處理過程，組織技術(shù)骨干全力搶修。

（4）發(fā)生機房空調(diào)系統(tǒng)設備重大故障，將造成機房的溫度短時間升高，危害數(shù)據(jù)設備的正常運行。發(fā)生此類故障后，如果一時無法修復，必須采取應急措施，保障機房環(huán)境符合要求。

（5）冷水機組故障。

• 冷水機組發(fā)生嚴重故障無法復位時，應馬上停機，啟動備用冷水機組，要注意開啟或關(guān)閉相應系統(tǒng)切換閥門。

• 在5分鐘內(nèi)逐級通知相關(guān)負責人，并通知設備廠家工程師，在四小時內(nèi)趕赴現(xiàn)場維修，在事后組織現(xiàn)場分析會填寫維修報告，由維護人員和項目主管確認并存檔備案。

（6）循環(huán)水泵故障（冷凍水泵、冷卻水泵）

• 巡查時發(fā)現(xiàn)運行水泵異常，應先暫停對應主機，后停異常水泵，開啟備用水泵，啟動主機繼續(xù)供冷。

• 維護人員檢查維修設備故障，當場解決的問題即時修復并在值班日志上記錄。

• 水泵故障較嚴重，應報告主管工程師，由其安排組織人員后續(xù)維修，并在事后填寫維修報告。

（7）冷卻水塔風機故障

• 冷卻水塔風機故障，應立即停止該機，轉(zhuǎn)開備用冷卻塔和風機。

• 維護人員檢查維修設備故障，當場解決的問題即時修復并在值班日志上記錄。

• 風機故障較嚴重，應報告主管工程師，由其組織人員后續(xù)搶修，并在事后填寫維修報告。

（8）冷卻水塔底盤漏水

• 巡查人員發(fā)現(xiàn)水塔底盤漏水，應即刻開啟備用水塔，將漏水水塔平衡管閥關(guān)閉。

• 故障報告主管工程師，由其組織搶修，并在事后填寫維修報告。

（9）冷卻水塔溢、漏水

• 冷卻水塔溢水或者漏水時，馬上檢查相應的浮球開關(guān)，可當場解決的即時修復。

• 浮球開關(guān)損壞即刻停止該塔運行，關(guān)閉對應的進水閥，并開啟備用水塔。

• 故障問題報告主管工程師，由其組織人員維修，并在事后填寫維修報告。

（10）主管道漏水

• 主管道漏水時應迅速關(guān)閉冷水機組和冷凍水、冷卻水水泵，并關(guān)閉漏水管道的前端閥門，將漏水引入地漏，及時清掃機房地面積水。

• 現(xiàn)場用沙包攔住電梯口、走廊口，以防水流入電梯井和用戶房，將水引入地漏。

• 將冷水機房內(nèi)集水器和分水器的底部排水閥打開排水，留意水泵房污水泵抽水情況，一旦發(fā)現(xiàn)集水池水位過高，則需關(guān)閉排水口。

• 事后報告技術(shù)主管，安排搶修并填寫維修報告。

（11）水平管網(wǎng)漏水

• 水平管網(wǎng)漏水時，應迅速將事發(fā)樓層管道井旁的水平管閥門關(guān)閉。

• 現(xiàn)場用沙包攔住設備間門口、電梯口、走廊口，以防水流入走廊、電梯井和用戶房，關(guān)閉空調(diào)水平衡管閥門，并及時組織人員進行搶修。

• 事后報告技術(shù)主管，安排搶修并填寫維修報告。

（12）末端空調(diào)機房內(nèi)的管道漏水

• 末端空調(diào)機房內(nèi)管道漏水，帶好地板吸到達漏水地點，檢查漏水現(xiàn)場有無觸電隱患，防止造成二次傷害。

• 關(guān)閉管道對應閥門，開啟機房內(nèi)對應管道的排水口排水，使用防汛沙袋進行臨時封堵，啟動備用空調(diào)設備。

• 對漏水管道進行檢查，找出漏水點進行維護，使用吸水器做好積水清理工作。

（13）市政補水系統(tǒng)停水

• 市政管線停水時，為避免制冷機組因缺水造成停機事故，在發(fā)現(xiàn)市政停水后，在3分鐘通知部門領導，及時和市政供水部分聯(lián)系處理緊急情況。

• 開通閥門使用備用水源對冷卻水系統(tǒng)供水。

處置流程如下：

應急人員安排及聯(lián)系方式如下：

廠家工程師聯(lián)系方式

四、數(shù)據(jù)中心油庫應急管理預案

總則：為保證數(shù)據(jù)中心油庫安全，并將油庫應急管理工作做到規(guī)范化、制度化，特制訂本管理辦法。本管理辦法適用于數(shù)據(jù)中心油庫應急故障處置。

應急方案啟動條件如下：本預案針對數(shù)據(jù)中心油庫發(fā)生突發(fā)火災、供油系統(tǒng)故障兩種狀態(tài)。突發(fā)火災是指油庫因施工、供電線路短路等原因引發(fā)的油庫管路、罐體內(nèi)柴油發(fā)生燃燒的突發(fā)時間；供油系統(tǒng)故障是指柴油發(fā)電機組得到啟機指令后發(fā)電機組啟動，但供油系統(tǒng)發(fā)生不可預見的、突發(fā)性的供油中斷及其他認為應該按本預案應對的突發(fā)情況，可以啟動本預案。

應急方案執(zhí)行原則如下：

1、沉著、冷靜，緊密配合，團結(jié)協(xié)作。

2、當遇到油庫火災或供油系統(tǒng)故障時，須及時通知值班工程師、公司負責人做好啟用油庫管理應急預案的準備。

3、先確認故障原因與時間，再確定應采取的進一步方法與步驟。

4、先確認設備當前狀態(tài)，再進行下一步操作。

5、在進行相關(guān)應急保障操作時，先進行操作，后接打問詢電話進行解釋、說明。

設備結(jié)構(gòu)現(xiàn)狀為本數(shù)據(jù)中心高壓油機房位于高壓發(fā)電機樓，目前配置2000KW威爾遜10KV高壓油機10臺和2000KW卡特10KV高壓油機10臺。

每個發(fā)電機房供油系統(tǒng)由100立方地埋油罐，每臺發(fā)電機組配套設置的1立方室內(nèi)油箱，配套管路、油泵，控制系統(tǒng)構(gòu)成。每個室內(nèi)油箱均有獨立的進、泄油電磁閥；每套供油系統(tǒng)分別有兩臺供油泵，互為主備，平時靠油箱內(nèi)的浮球開關(guān)控制油泵啟停。

應急處置內(nèi)容如下：

1、供油系統(tǒng)突發(fā)火災。當發(fā)電機供油系統(tǒng)的發(fā)電機、管路、室內(nèi)油箱、地埋油罐、油泵等部位的柴油起火燃燒。

原因分析：

（1）施工人員未按規(guī)范進行焊接、切割等帶明火作業(yè)造成管路、油罐、油箱內(nèi)的柴油燃燒。

（2）水泵、控制電子閥等因電氣故障造成短路起火，引燃管路、油罐、油箱內(nèi)的柴油。

處置方案：

（1）發(fā)電機房內(nèi)發(fā)電機、機房內(nèi)日用油箱、管路起火燃燒現(xiàn)場，維護人員首先對火情進行判斷，確保人身安全。若火勢較小，應打開放置于機房內(nèi)的滅火器進行撲救，控制火情蔓延，火撲滅后應立即將火情通知數(shù)據(jù)中心消防中控室；若火勢較大，應立即撤離現(xiàn)場，并立即將火情通知數(shù)據(jù)中心消防中控室，由專業(yè)消防人員組織撲救，高壓油機維護人員應緊急對室內(nèi)油箱進行泄油操作。

（2）發(fā)電機房外部油罐、油泵、輸油管道起火燃燒現(xiàn)場，維護人員應查看火情后立即將火情通知園區(qū)消防中控室，并應盡快撤離現(xiàn)場，等待專業(yè)消防人員組織撲救。

設備替代情況：

（1）單臺發(fā)電機起火可由處于并機的其它發(fā)電機提供備用。

（2）單路輸油管理起火可以由備用管路進行替代。

（3）單個室內(nèi)油箱或室外油罐發(fā)生火災需增加臨時供油管路時，從相鄰油箱或油罐內(nèi)補油。

2、供油系統(tǒng)突發(fā)故障。當供油系統(tǒng)中油泵、供油控制系統(tǒng)等出現(xiàn)故障，并導致對應發(fā)電機組無法正常運行。

原因分析：

（1）電氣方面的原因

• 供油系統(tǒng)控制線路故障，控制系統(tǒng)掉電。

• 控制柜內(nèi)各控制各元器件老化損壞。

• 浮球開關(guān)故障，無法給出啟停指令。

• 油泵故障，無法正常工作。

• 電磁閥無法正常開關(guān)。

（2）管道系統(tǒng)的原因

• 管道系統(tǒng)檢修后管道進氣。

• 管路破裂跑油。

處置方案：

（1）電氣器件故障采用手動操作補油方式。

（2）采用應急補油裝置從鄰近油箱、油罐內(nèi)進行補油。

設備替代情況：

（1）如果一臺供油泵出現(xiàn)故障，可啟用備用的供油泵恢復供油，以保障供油系統(tǒng)不間斷工作。

（2）如果一套供油回路出現(xiàn)故障，可啟用該故障回路所屬油箱的互備油箱間的連通閥門，以確保供油系統(tǒng)的不間斷工作。

預防保障措施如下：

（1）對供油系統(tǒng)進行例行維護、安全檢查，監(jiān)控設備及供油系統(tǒng)的健康狀況。

（2）備用、互備供油系統(tǒng)做好例行維護測試、檢查，確保應急狀態(tài)下的成功應用。

應急物資配備。應急物資包括電工工具、管鉗、便攜式油泵控制箱、電纜、手電、滅火器、對講機。日常維護中應加強對應急物資性能進行檢查，確保性能完好。

上報流程。完善各項安全防護措施；做好人員應急培訓與演練；對維護過程中發(fā)生的火災、影響發(fā)電機正常運行的重大問題，應在10分鐘內(nèi)及時上報主管部門及數(shù)據(jù)中心物業(yè)消防中控室。

知曉范圍與解釋。本預案的內(nèi)容知曉范圍，限于本應急預案的上級管理部門及預案內(nèi)容編制、維護、更新部門的相關(guān)工作人員；應予熟練掌握的包括現(xiàn)場動力維護人員及應急保障小組其他應急響應人員。本辦法由基礎設施維護部門負責解釋，自印發(fā)之日起實施。

五、基礎設施運維應急預案建設建議

各類數(shù)據(jù)中心應針對本數(shù)據(jù)中心的地理位置，風火水電等基礎資源的配備情況，結(jié)合本數(shù)據(jù)中心基礎設施運維的特點，分析本數(shù)據(jù)中心危險源及意外事件發(fā)生的頻率及影響，進而建立適合本數(shù)據(jù)中心的基礎設施運維應急處理體系，各類應急預案建立如下：

（本文節(jié)選自《中國數(shù)據(jù)中心運維管理指針》，如需購買或轉(zhuǎn)載請留下您的聯(lián)系電話及郵箱發(fā)送留言至本公眾號，將有工作人員與您聯(lián)系）

微信ID：chinadcc