計算機系統故障應急預案一、目標/范圍1、目標與范圍在計算機信息管理系統面臨各種緊急情況（例如：數據庫系統錯誤、服務器操作系統錯誤等情況）時，把數據損失降到最低，并且把這些情況對醫療流程和醫療收費業務的影響降到最低。背景描述=1\*GB2⑴關鍵業務中聯醫院信息系統：包括門診醫生站、住院醫生站、住院護士站、藥品流通系統、藥品發藥系統、門診掛號收費、住院收費管理一整套醫院主要業務的基礎系統。=2\*GB2⑵現有技術平臺數據庫系統：xx業務服務器OS：xx終端工作站OS：MicrosoftWindowsxx=3\*GB2⑶與其他系統的接口PACS系統接口：中聯PACS系統LIS系統接口：中聯LIS系統PASS系統接口：xxx二、啟動應急方案的標準/引發時間保存數據庫數據文件的存儲設備出現故障，一定要停止系統的時候，啟動系統中心級應急方案；數據庫系統發生問題使得關鍵業務出現問題，無法正常進行的時候，啟動系統中心級應急方案；網絡核心交換機出現問題，使關鍵業務無法正常進行的時候，啟動網絡級應急方案；為系統安全進行數據庫冷備份的時候啟動數據庫級應急方案；系統硬件設備軟件、固件進行升級，導致必須停機的時候，啟動設備中心級應急方案（此種情況一般包括進行數據庫冷備份操作，即啟動數據庫級應急方案）；三、應急方案預期實施時間數據庫級應急方案的預期實施時間為2個小時；設備中心級應急方案的預期實施時間為4-6小時；系統中心級應急方案的預期實施時間為最短6-8小時；網絡級應急方案的預期實施時間至少6個小時；四、應急方案的運行、管理和實施1、組織機構和職責=1\*GB2⑴應急指揮中心醫院信息系統應急處理領導小組組長由分管院領導擔任，副組長由信息中心主任擔任，成員由院辦、黨辦、醫務部、門診部、護理部、財務部、藥劑科、醫保科等部門負責人組成，應急指揮中心設在住信息中心。應急指揮中心主要職責是組織、指揮和協調人力和資源，使得HIS系統盡快恢復正常并且使得系統故障對醫療流程的影響降到最低。=2\*GB2⑵應急/恢復小組按照應急方案的流程盡快恢復關鍵業務的運行，使得系統故障對醫療流程的影響降到最低。故障影響范圍負責人執行人操作系統全院業務倪建禮xx數據庫核心網絡xxxx匯聚層或樓層網絡樓宇/層業務xxx數據庫部分科室業務xxPASS服務器/存儲設備部分科室業務Xxxx空調、UPS等硬件故障信息中心Xxxx2、啟動應急工作模式的程序每隔4個月進行一次數據庫冷備份，啟動數據庫應急方案；業務系統運行設備（EVA6400存儲設備、HPrx8640服務器）軟件、固件或配件升級需要啟動設備中心級應急方案；運行業務系統的設備或正在運行業務的數據庫突然出錯并且使得應用工作站運行程序時無法登錄系統根本無法繼續進行HIS系統正常業務操作時啟動系統中心級應急方案；業務系統運行設備（EVA6400存儲設備、HPrx8640服務器）以及HIS系統數據庫都呈現正常狀態，但是核心網絡設備（CISCO4506交換機）出現不正常狀態導致下面的工作站無法連接數據庫HIS系統正常業務無法繼續下去，這時啟動網絡級應急方案；3、應急工作的信息管理程序一切協調各科室運作的指令由指揮中心或指揮中心授權人員傳達，所有傳達的協調指令應該按照以下各式保存：指令發出時間發出指令人指令內容接受指令人年月日分秒***********…………4、在應急模式下運行的程序=1\*ROMANI數據庫級應急方案：停止數據庫，把存儲上的數據文件拷貝到主機或備份機的本地硬盤上，重新啟動數據庫。執行步驟如下：=1\*GB2⑴通知各部門停止使用HIS系統；=2\*GB2⑵停止系統數據庫服務；=3\*GB2⑶把存儲上的數據文件拷貝到備機或主機的本地硬盤上；=4\*GB2⑷重新啟動數據庫；=5\*GB2⑸通知各部門開始恢復使用計算機系統；至此，數據庫級應急方案結束。=2\*ROMANII設備中心級應急方案：系統現在使用的是主機群集狀態，數據庫所有數據文件都放在存儲上，如果存儲設備固件或配件升級就需要長時間停止存儲的服務，此時就需要停止數據庫，把存儲上的數據文件拷貝到主機或備份機的本地硬盤上，并仿照數據文件在存儲上的路徑在主機上重建存儲文件夾，啟動數據庫，檢查系統業務是否正常，確認系統業務可以正常使用后開始手工收費，先為收費劃價人員開啟一個劃價功能的終端，配置好一個新的tns連接，指到備份的pcserver上的數據庫。收費劃價人員根據計算機中劃價的金額收款，手寫發票。如果升級過程出現異常導致升級時間超出6-8小時迎來業務高峰就可以考慮使用備機暫時使業務正常運行，升級完成后再恢復正常。實施步驟如下：=1\*GB2⑴為收款和藥局新建連接到備用PCServer的tns連接字串；=2\*GB2⑵通知各部門停止使用HIS系統；=3\*GB2⑶停止系統數據庫服務；=4\*GB2⑷把存儲上的數據文件拷貝到備機或主機的本地硬盤上；=5\*GB2⑸把主機或備機的文件目錄更改成和原來數據庫文件存儲的路徑一致；=6\*GB2⑹在主機或備機上啟動數據庫，如果應用可以正常使用，就繼續下一步，否則就找出原因，直到拷貝出來的數據文件可以正常使用；=7\*GB2⑺維修或維護存儲設備，做軟件和固件升級；=8\*GB2⑻如果在正常的預期時間范圍內完成就可以啟動數據庫，應用程序正常后通知各部門恢復使用HIS系統；通常情況下，到這一步系統正常使用后就完成工作了，但是一旦出現異常情況導致系統在升級過程拉長，面對即將到來的業務高峰，應該采取以下步驟：=1\*GB2⑴把主機或備機的文件目錄更改成和原來數據庫文件存儲的路徑一致；=2\*GB2⑵在主機或備機上啟動數據庫，應用程序就可以正常使用，然后繼續維修或維護存儲或做軟件和固件升級；=3\*GB2⑶當維修或維護完成，設備正常后，選擇在夜間業務不忙的時候通知各部門在停止使用計算機系統；=4\*GB2⑷停止在主機或備機的數據庫服務；=5\*GB2⑸把主機或備機上的數據文件拷貝到存儲設備上；=6\*GB2⑹啟動數據庫服務，確認系統正常后通知各科室恢復使用HIS系統；備用PCServerIP地址：123.123.123.3以上就是完整的設備中心級應急方案。=3\*ROMANIII系統中心級應急方案：把存儲上的數據文件拷貝到主機或備份機的本地硬盤上，啟動手工收費程序，現在醫療收費項目多、藥品項目也很多因此要給收費劃價人員開啟一個劃價功能的終端，配置好一個新的tns連接，指向備份的pcserver上的數據庫。收費劃價人員根據計算機中劃價的金額收款，手寫發票，直到數據庫恢復完成后再使用計算機系統。實施步驟如下：=1\*GB2⑴為收款和藥局新建連接到備用PCServer的tns連接字串；=2\*GB2⑵通知各部門停止使用HIS系統；=3\*GB2⑶讓藥局和收費部門使用后來建立的連接字串進行劃價，然后手工收費；=4\*GB2⑷把存儲上的數據文件拷貝到備機或主機的本地硬盤上；=5\*GB2⑸對數據庫進行恢復；=6\*GB2⑹數據庫恢復完成，應用程序正常后，通知各部門開始使用HIS系統；=4\*ROMANIV網絡級應急方案：系統核心交換機出現問題導致網絡癱瘓，所有或部分工作站無法連接數據庫。如果是樓層交換機有問題，可以用備用交換機替換下來，如果發生了兩臺核心交換機出了問題，就要進行下面的緊急方案。實施步驟如下：=1\*GB2⑴把兩臺PCSever搬到一樓和二樓；=2\*GB2⑵更改好兩臺服務器各自的ip地址，為收款和藥局工作站配好新的tns連接字串；=3\*GB2⑶收款和藥局進行手工劃價收費；=4\*GB2⑷排除核心交換機問題后，恢復使用HIS系統；=5\*ROMANV環境級應急方案：系統機房的空調、機房UPS、以及樓層交換機電源故障。1、系統機房空調現在分布狀況是主機房4臺，UPS室1臺。如果出現電源閃斷，會出現在機房所有空調停機，如果我院供電出現閃斷或因其它原因造成停電，相關部門必須通知計算機中心，計算機中心要安排值班人員，待供電恢復正常手工啟動空調。如果因空調故障或空調供電線路出現故障，可以打開機房的兩個大門，利環境溫度降溫。如果環境溫度較高，降溫效果不好，則要手工關閉小型機和存儲設備，待環境溫度正常后再重新開啟。2、樓層交換機故障新門診大樓的樓層交換機都配有UPS，如果UPS故障，可以先把交換機電源直接接