應(yīng)急處理案例-某乳制品股份公司緊急搶修
事故情況：
由于建筑管道漏水，導(dǎo)致機(jī)房遭受大面積積水以及部分服務(wù)器和小部分存儲(chǔ)設(shè)備受到間接性進(jìn)水的情況發(fā)生。相關(guān)業(yè)務(wù)系統(tǒng)及應(yīng)用暫停，情況緊急，屬重大事故。
事故發(fā)生時(shí)間為凌晨1:00。
應(yīng)對(duì)情況：
接到通知后，公司啟動(dòng)應(yīng)急預(yù)案。
①    由于未簽署駐場(chǎng)服務(wù)，派遣專(zhuān)業(yè)工程師前往事故現(xiàn)場(chǎng)，協(xié)助機(jī)房工作人員進(jìn)行緊急處理工作，并負(fù)責(zé)統(tǒng)計(jì)機(jī)房受災(zāi)情況。
②    派遣專(zhuān)業(yè)工程師和庫(kù)房工作人員組成應(yīng)急工作小組，前往備件庫(kù)房檢查并測(cè)試相關(guān)備機(jī)，并保持最佳狀態(tài)。
③    事故現(xiàn)場(chǎng)工程師統(tǒng)計(jì)機(jī)房受災(zāi)情況完畢后，立刻劃分受災(zāi)服務(wù)器故障等級(jí)，并制定簡(jiǎn)略應(yīng)急維修方案。
④    備件庫(kù)房應(yīng)急工作小組，根據(jù)現(xiàn)場(chǎng)工程師制定的應(yīng)急維修方案攜帶備件服務(wù)器以及相關(guān)維修設(shè)備前往事故現(xiàn)場(chǎng)。
⑤    指揮并協(xié)助機(jī)房工作人員對(duì)事故現(xiàn)場(chǎng)進(jìn)行適宜處理，使機(jī)房盡快恢復(fù)正常工作狀態(tài)。
⑥    對(duì)故障等級(jí)低的受災(zāi)服務(wù)器由專(zhuān)業(yè)工程師進(jìn)行快速維修，并恢復(fù)運(yùn)行狀態(tài)，從而恢復(fù)部分業(yè)務(wù)和應(yīng)用的正常使用。
⑦    對(duì)故障等級(jí)高的受災(zāi)服務(wù)器由應(yīng)急工作小組進(jìn)行簡(jiǎn)單包裝后帶回維修中心，進(jìn)行進(jìn)一步檢測(cè)，并加急維修。
受災(zāi)統(tǒng)計(jì)及結(jié)果：
①    本次受災(zāi)情況屬重大事故，受災(zāi)服務(wù)器達(dá)到10余臺(tái)，其中情況嚴(yán)重的包含處理業(yè)務(wù)的小型機(jī)，公司存儲(chǔ)數(shù)據(jù)的存儲(chǔ)服務(wù)器以及作為臨時(shí)業(yè)務(wù)工作備份服務(wù)器的兩臺(tái)NAS網(wǎng)絡(luò)存儲(chǔ)和個(gè)別應(yīng)用服務(wù)器。
②    由于我公司搶救及時(shí)，使得部分應(yīng)用于事故發(fā)生后2個(gè)小時(shí)候恢復(fù)運(yùn)行。對(duì)受災(zāi)嚴(yán)重的存儲(chǔ)服務(wù)器，進(jìn)行加急數(shù)據(jù)恢復(fù)工作，并保證了數(shù)據(jù)的完整性，使企業(yè)避免遭受更大的經(jīng)濟(jì)損失。
③    因?yàn)楸敬斡行Ъ皶r(shí)的應(yīng)對(duì)措施，和扎實(shí)的專(zhuān)業(yè)能力，使得我公司與該企業(yè)落實(shí)了長(zhǎng)期合作關(guān)系。

附企業(yè)機(jī)房服務(wù)器故障應(yīng)急預(yù)案（簡(jiǎn)版）
1  目的
為提高處理公司服務(wù)器故障的能力，形成科學(xué)、有效、反應(yīng)迅速的應(yīng)急工作機(jī)制，確保公司各系統(tǒng)的安全和高效，最大限度地減小服務(wù)器故障對(duì)生產(chǎn)的影響，保護(hù)公司利益，特制定本預(yù)案。
2  適用范圍
本預(yù)案適用于公司局域網(wǎng)中提供公共服務(wù)的服務(wù)器發(fā)生和可能發(fā)生的故障。
3  預(yù)防機(jī)制
服務(wù)器故障預(yù)防措施包括分析風(fēng)險(xiǎn)，建立檢測(cè)體系，準(zhǔn)備應(yīng)急處理措施，控制影響擴(kuò)大。
3.1  服務(wù)器故障分類(lèi)
服務(wù)器硬件或軟件的故障；自然災(zāi)害（水、火、電等）造成的物理破壞；電腦病毒等惡意代碼危害等。
3.2  具體措施
（1）建立安全、可靠、穩(wěn)定運(yùn)行的機(jī)房環(huán)境，防火、防雷電、防水、防靜電、防塵；建立備份電源系統(tǒng)。
（2）服務(wù)器采用可靠、穩(wěn)定硬件，落實(shí)數(shù)據(jù)備份機(jī)制，遵守安全操作規(guī)范；安裝有效的防病毒軟件，及時(shí)更新升級(jí)掃描引擎。
4  有關(guān)應(yīng)急預(yù)案
4.1  機(jī)房漏水應(yīng)急預(yù)案
（1）發(fā)生機(jī)房漏水時(shí)，第一目擊者應(yīng)立即通知相關(guān)人員，相關(guān)人員接報(bào)后應(yīng)立即前往事發(fā)地。
（2）若空調(diào)系統(tǒng)出現(xiàn)滲漏水，相關(guān)人員立即通知企管部進(jìn)行處理,并及時(shí)清除機(jī)房積水。
（3）若墻體或窗戶(hù)滲漏水，相關(guān)人員立即采取有效措施確保機(jī)房安全，同時(shí)通知企管部，及時(shí)清除積水，維修墻體或窗戶(hù)，消除滲漏水隱患。
4.2  機(jī)房長(zhǎng)時(shí)間停電應(yīng)急預(yù)案
接到長(zhǎng)時(shí)間停電通知后，相關(guān)人員應(yīng)及時(shí)部署應(yīng)對(duì)具體措施，啟動(dòng)備用電源,保證服務(wù)器正常運(yùn)行。
4.3  服務(wù)器硬件故障應(yīng)急預(yù)案
（1）核心服務(wù)器雙機(jī)配置，配置好備用服務(wù)器，隨時(shí)待命。
（2）發(fā)生服務(wù)器硬件故障后，相關(guān)人員應(yīng)及時(shí)查找、確定故障原因，進(jìn)行先期處置。若故障服務(wù)器在短時(shí)間內(nèi)無(wú)法修復(fù)，相關(guān)人員應(yīng)啟動(dòng)備用服務(wù)器，保持局域網(wǎng)系統(tǒng)的正常運(yùn)行；將故障服務(wù)器脫離網(wǎng)絡(luò)，進(jìn)行故障排除工作。
（3）服務(wù)器硬件故障預(yù)防與排除參考附件1。
4.4  服務(wù)器軟件系統(tǒng)故障應(yīng)急預(yù)案
（1）做好服務(wù)器軟件系統(tǒng)的定時(shí)備份，系統(tǒng)崩潰后，能夠及時(shí)恢復(fù)系統(tǒng)。
（2）發(fā)生服務(wù)器軟件系統(tǒng)故障后，相關(guān)人員應(yīng)檢查出現(xiàn)故障的原因并盡快排除。
（3）如遇服務(wù)器系統(tǒng)崩潰，應(yīng)啟用備份系統(tǒng)進(jìn)行恢復(fù)。
（4）服務(wù)器軟件故障預(yù)防與排除參考附件2。

附件1：
服務(wù)器硬件故障預(yù)防與排除
1  故障預(yù)防
公司主要應(yīng)用系統(tǒng)服務(wù)器進(jìn)行雙機(jī)配置。公司主要系統(tǒng)服務(wù)器擔(dān)任了供應(yīng)系統(tǒng)，銷(xiāo)售、生產(chǎn)系統(tǒng)，OA系統(tǒng)等服務(wù)器角色，機(jī)器需要24小時(shí)運(yùn)行，使用率極高，老化快。為了安全，建議配置相同硬件的服務(wù)器為備用控服務(wù)器。當(dāng)使用的服務(wù)器出現(xiàn)不可恢復(fù)的硬件故障時(shí)，馬上啟動(dòng)備用服務(wù)器，從而減小服務(wù)器硬件故障風(fēng)險(xiǎn)。
2  故障排除
當(dāng)服務(wù)器出現(xiàn)硬件故障，通過(guò)以下步驟排除：
（1）確定故障原因。依次查看電源、硬盤(pán)、內(nèi)存、主板、處理器等，如條件許可，可使用替換法檢測(cè)各硬件。
（2）恢復(fù)固件缺省配置。比如去除第三方廠商備件和非標(biāo)配備件；清除CMOS，恢復(fù)資源初始配置。
附件2：
服務(wù)器軟件故障預(yù)防與排除
1  故障預(yù)防
1.1  服務(wù)器初始狀態(tài)備份
安裝配置好服務(wù)器軟件系統(tǒng)，經(jīng)測(cè)試能夠正常投入生產(chǎn)使用后，用GHOST軟件備份好服務(wù)器系統(tǒng)。備份文件本機(jī)一份，光盤(pán)或移動(dòng)存儲(chǔ)一份。
1.2  服務(wù)器實(shí)時(shí)狀態(tài)備份
公司局域網(wǎng)中服務(wù)器的系統(tǒng)及相應(yīng)的數(shù)據(jù)庫(kù)會(huì)周期更新一次，備份文件本機(jī)一份，光盤(pán)或移動(dòng)存儲(chǔ)一份。
2  故障排除
服務(wù)器軟件系統(tǒng)出現(xiàn)故障，先對(duì)服務(wù)器系統(tǒng)查毒，升級(jí)相關(guān)系統(tǒng)軟件，若故障依然存在，通過(guò)以下步驟排除：
（1）用備份系統(tǒng)還原服務(wù)器系統(tǒng)。GHOST文件還原服務(wù)器系統(tǒng)的初始狀態(tài)，進(jìn)入“目錄服務(wù)還原模式”還原系統(tǒng)實(shí)時(shí)狀態(tài)。
（2）重新安裝配置服務(wù)器。若備份系統(tǒng)還原系統(tǒng)失敗，必須重新安裝服務(wù)器系統(tǒng)。