1、多渠道智能一體化運維管理平臺項目背景及目標在我國過去20年里，IT信息化建設在國內各行各業發展迅速，尤其在金融領域極為明顯。然而隨著業務規模的不斷擴大，IT基礎資源建設規模也越來越大，IT基礎資源規模的快速增長給IT管理部門帶來了莫大的挑戰，即“網絡安全穩定、基礎設施安全可靠、應用系統安全穩定高效、業務滿足7X24小時服務等”各種要求，再加上監管部門的各種安全規范與要求，IT管理部門需要克服現實工作中的各種技術及管理問題。在諸多問題中最突出的問題主要集中在“IT運維的系統化管理”上：一是在如此繁雜IT架構下，IT基礎信息管理混亂、對象間關系模糊，缺少對IT對象的系統化、標準化管理；二是IT監控

2、分專業，專業間數據無關聯，缺少一套集中式監控與預警系統；三是業務發生故障時IT響應滯后、被動，缺少網絡性能及交易性能方面的監控手段。這些問題的存在，從短期看，已或大或小地影響了天津農商銀行IT信息化建設，如：不利于IT基礎設施資產統計、不利于IT基礎設施生命周期的跟蹤、控制與管理、圍繞IT基礎設施生產運維工作效率提升不上去及生產運維工作難以形成“主動運維”機制等等；從長期看，已經嚴重影響到了天津農商銀行新數據中心的建設，關系到未來天津農商銀行新數據中心啟用后IT運維管理水平能否再上新臺階。綜上所述，天津農商銀行需要搭建一套能夠滿足未來新數據中心需求、為信息科技管理工作質量提升及快速實現“科技引

3、領業務”目標起到推動作用的“多渠道一體化運維管理平臺”。項目方案天津農商銀行通過構建“多渠道智能一體化運維管理”體系，并以此指導“多渠道智能一體化運維管理平臺”建設過程。該平臺能夠有效實現對IT運行整體環境的監控，即對主機系統、網絡系統、安全設備、數據庫、中間件、存儲設備、應用系統、IT環境等的集中監控和管理。能夠及時采集各類告警數據、性能數據和配置數據，進行集成統一的分析、查詢、報告和展示，幫助運維管理人員方便有效的定位系統問題，直觀快速的診斷和分析問題，將運維模式由被動的支持轉為主動式服務。通過幫助服務臺接收各類告警事件，按照預先定義的事件管理流程完成事件的處理。建立故障管理、問題管理、變

4、更管理、配置管理等服務工作流程，通過管理人員、技術和流程的有機結合，實現IT運維管理標準化和規范化，形成一套完整的IT一體化運維管理體系。平臺主要功能包括：一是，基于ITIL理念，結合IT信息化管理要求，構建IT基礎信息數據庫（CMDB），實現對天津農商銀行IT基礎信息的統一標準化、系統化管理；二是，結合當今IT信息化技術，采用帶外技術構建基于帶外數據的性能監控系統，實現對天津農商銀行重要、一級、二級業務系統網絡性能及交易性能方面監控；三是，構建“多渠道智能一體化運維管理平臺”基礎平臺，打通該平臺與各專業監控系統信息通道，實現對IT基礎對象的集中式監控與統一預警。創新點一、本系統的技術架構以基

5、于SOA架構，集成動環、網絡、系統監控以及交易監控等系統，以IT基礎信息配置管理為建設基礎，以CMDB為核心支撐點，以業務為管理視角實現監控集中和統一展現；二、基于CMDB構建ITSM流程化控制與管理功能和移動終端APP功能；三、利用大數據技術通過對全IT日志進行統計分析實現“事件關聯預警”，結合各種IT運維場景，利用機器學習與算法建模技術，實現基于IT運維日志數據輔助提升IT運維質量的“精準預警、異常檢測、容量管理”等深度應用。技術實現特點“多渠道智能一體化運維管理平臺”技術架構圖如上圖所示:、內部結構采用分層式設計，各層間通過接口對接，為了保證接口的標準化和數據傳遞的規范性，設計中采用服務

6、總線的設計思想和相關技術實現數據整合平臺（DIP）。它介于專業子系統層和集中處理層之間，起到規范數據交換標準、可以消除不同監控應用之間的技術差異，讓不同的專業子系統協調運作，實現了不同服務之間的通信與整合。二、數據整合平臺采用標準、通用的接口技術（如WebService等），實現性能數據、事件告警數據、其它事件數據、配置數據、報表數據在專業子系統層與集中處理層之間的數據傳送；三、外部訪問接口提供多種接口，如文件接口、rest接口、Webservice接口等，以滿足三方系統不同接入方式，這也為后續該平臺的可擴展性提供了方便。項目過程管理依項目初期制定的目標，整個項目實施分成了兩個子項目，即“多渠

7、道智能一體化運維管理平臺”基礎平臺和基于帶外流數據的“性能監控系統”。前者實現對IT基礎信息的統一標準化、系統化管理及“集中監控與統一預警”功能，后者主要實施“網絡性能監控”及“交易性能監控”。因為兩個系統間有關聯，所以由一個大項組分出兩個小項目組各負責一個子項目，大項目組統一管理兩個小項目組，負責項目間協調和統一項目管理工作。整個項目從項目啟動會直至投產試運行，平均12個人歷經8個月。運營情況一、“多渠道智能一體化運維管理平臺”已經實現了基于天津農商銀行IT信息化管理要求的IT基礎信息數據結構落地工作，各部分數據按要求有序入庫管理，數據管理工作例行納管流程有序推進；平臺已納管全部重要、一級、

8、二級業務系統相關服務器、數據庫、中間件、應用等監控任務，經過近半年左右的優化，已能夠對服務器硬件、存儲硬件、操作系統、數據庫、中間件、應用等進行實時監控，并能夠按照預設的預警規則進行有效預警；二、“網絡性能監控”已實現對天津農商銀行全部生產環境中重要網絡設備的網絡性能監控；三、“交易性能監控”已實現對天津農商銀行重要、一級、二級近40余套業務系統的交易性監控，預警信息實時推送“多渠道智能一體化運維管理平臺”實現統一預警；四、“動環監控”系統實時推送預警信息給“多渠道智能一體化運維管理平臺”實現統一預警。項目成效一、在IT基礎信息管控方面，“多渠道智能一體化智能運維管理平臺”讓IT運維人員徹底告

9、別了之前臺賬式無系統的IT基礎數據管理時代，CMDB結合制度化流程管控，IT基礎數據賬實相符度比之前提高了40%-50%，數據質量顯著提高；二、網絡性能監控實時監測重要監測點的網絡流，特別是與第三方相關的網絡，如銀聯、人行、農信銀等，比起之前在出現與三方間交易性能或交易中斷問題時通過命令排查網絡問題，排查效率大大提升；三、交易性能監控系統實時從“交易量、響應時間、響應率、成功率”四個維度對每個業務系統的相關監控點進行監控，實時保存流水數據，并依預設預警規則實時預警，這既改變了之前交易故障時IT運維人員的被動運維狀態，而且也為IT運維人員排障提供了有效的排障依據，從而提高了排障速度。經驗總結經過多渠道智能一體化運維管理平臺的落地實施，天津農商銀行已經實現了對IT運行整體環境的集中監控、管理和統一展現，并能幫助運維管理人員方便有效的定位系統問題，直觀快速的診斷和分析問題，將運維模式由被動的支持轉為主動式服務。同時，梳理了數據中心的I