保定工行徐水支行保定工行徐水支行緊緊急故障急故障 處處理演理演練練方案方案 目錄 1 演練計劃 2 演練目的 3 演練方式 4 演練參加人員 5 演練時間 6 演練步驟 6 1 故障發現 6 2 故障傳報 6 3 成立緊急故障處理臨時機構 6 4 各相關部門故障處理和配合方案 6 4 1 數據中心故障處理步驟 7 演練總結 1 演演練計練計劃劃 驗證在大客戶設備協議轉換器在出現故障時的處理過程 來驗證 應急方案的可行性和正確性 2 演 演練練目的目的 檢查維護人員對緊急情況的反映速度 以及對故障定位的準確性 達到在真正出現突發事件時能夠在最短時間內解決問題 同時檢查整 個運維部門應對故障的的聯動效果 3 演 演練練方式方式 使用在徐水工行的協議轉換器設備 模擬協議轉換器掉電 維護 人員對此故障進行搶修處理 公司配合做好用戶的接待與解釋工作 模擬影響的用戶范圍為保定徐水工行用戶 4 演 演練練參加人參加人員員 組名組成名單職責聯系電話 運維部經理段曉雷總指揮 運維部副經理 龔錚 總體指揮本次 緊急故障處理 演練 對演練 方案總體把值班組組員 負責所有設 備 24 小時監 控 發現問題 及時通知相關 人員 并協助13001874444 其他維護人員 處理故障 做 好故障處理記 錄 組長張輝 統一協調指揮 并調度其它通 信資源數據網管組 劉滄海 東帆 負責聯系廠家 及進行故障搶 修13313022376 數據部劉艷 負責通知用戶 并做好相應解 釋工作5 演 演練時間練時間 2007 年 3 月 5 日上午 9 00 6 演 演練練步步驟驟 6 1 故障的判斷故障的判斷 1 9 00 由運維部張輝模擬故障投訴通知2 9 03 機房值班人員接到告警后判斷為大客戶故障后迅速通知大 客戶包機人劉滄海 3 9 06 劉滄海通過筆記本登陸到工行依照故障處理流程發現并不 是所有工行用戶故障 但是發現不能使用的用戶只是徐水工行 通過 網管 ATM 設備發現紅燈閃爍 證明下端設備告警 6 2 故障上 故障上報報 1 包機人劉滄海通過查詢后發現影響范圍為徐水工行 立即通知 數據網管維護組長張輝張輝隨后立即將情況向市分 運維部經理龔錚段曉雷進行匯報 同時張輝與數據部經理溝通對用戶的解釋口徑 并將用戶影響范圍劃 定為徐水工行 并要求數據部負責人通知到徐水工行 確定的統一解釋為 技術人員正在進行障礙的排除 請您稍后再使用 為您造成的不 便 敬請諒解 故障已處理并恢復后解釋 現以恢復正常對您造成的不便 敬請諒解 6 2 2 通知代 通知代維維技技術術支持人支持人員員 代維接入網設備維護汪松林6 2 3 通知相關部 通知相關部門門做好故障做好故障處處理配合工作理配合工作 數據部 劉艷6 3 成立 成立緊緊急故障急故障處處理理臨時臨時機構機構 部門層面啟動 應急預案 成立緊急故障臨時指揮小組 明確職 責 組長負責運維經理 總體指揮故障處理及公司各項資源協調 必 要時與省分公司及設備廠家進行溝通及請求支持 副組長 運行維護部經理 統一組織故障搶修及維護資源協調 必 要時與省分公司及設備廠家進行溝通及請求支持 數據部經理 安排人員進行工行用戶的解釋工作 成員 維護技術人員 具體負責故障的定位及排除 6 4 各相關部 各相關部門門故障故障處處理方案理方案 6 4 1 數據網管中心故障 數據網管中心故障處處理步理步驟驟 1 9 10 包機人劉滄海攜帶筆記本準備到事故現場 張輝與傳輸 網管進行協調對傳輸光纖電路進行檢查 2 9 14 在傳輸網管上發現基站 OPTIX2500 下端告警 可以排 除傳輸故障引起 故障初步定位為協議轉換器掉電 協議轉換器接口 板或設備損壞 協議轉換器到中行設備中斷的 3 種原因 3 9 20 張輝協調人員從維護部待命 準備設備到徐水工行 4 值班人員詢問數據部負責大客戶人員調查用戶反應情況 做好 相關記錄投訴情況等 5 11 20 代維維護人員汪凇林攜帶筆記本趕到現場 檢查設備狀態 發現為設備掉電 11 25 將設備空開閉合后 登陸到系統上檢查網絡 連通情況 在確認可以連通后將問題反饋給張輝 6 11 30 張輝向數據部小區業務人員告知故障恢復 7 11 35 數據部小區業務人員回饋用戶故障處理完畢 請測試的通 知 8 11 40 包機人劉滄海在 ATM 上發現有徐