1、大數據大數據&可視化可視化開啟數據中心高效運營時代開啟數據中心高效運營時代Paramon廣泛應用于高性能計算、云計算領域等大型數廣泛應用于高性能計算、云計算領域等大型數據中心，一秒一刷新顯示收集機群處理器、內存、網絡、據中心，一秒一刷新顯示收集機群處理器、內存、網絡、存儲、能耗、存儲、能耗、License、作業等數據，生成、作業等數據，生成.para應用運應用運行特征文件，為大規模機群應用分析、設計、優化提供大行特征文件，為大規模機群應用分析、設計、優化提供大數據支撐；同時，提供全過程機群及應用運行狀態的實時數據支撐；同時，提供全過程機群及應用運行狀態的實時監控、管理和性能異常報警。監

2、控、管理和性能異常報警。Paramon和和Paratune概述概述Paratune用于分析由用于分析由Paramon生成的生成的.para應用運行應用運行特征文件，精準顯示應用運行過程中的特征，為各類大規特征文件，精準顯示應用運行過程中的特征，為各類大規模機群應用建立大數據支撐平臺，提供多樣性（模機群應用建立大數據支撐平臺，提供多樣性（Variety）、體量化（）、體量化（Volume）、速度化（）、速度化（Velocity）、有價值）、有價值（Value）的應用運行特征數據庫，幫助用戶完成應用機）的應用運行特征數據庫，幫助用戶完成應用機群構建、機群應用運行過程重構、應用程序優化等工作。群構建

3、、機群應用運行過程重構、應用程序優化等工作。Parasoft軟件體系軟件體系LinuxWindowsLinux管理節點管理節點計算節點計算節點計算節點計算節點共享文件系統共享文件系統計算節點計算節點計算節點計算節點LinuxWindowsParaPlus一一體體化化服服務務PARA性能數據文件性能數據文件Paratune機群機群/應用性能分析和優化應用性能分析和優化Paramon機群機群/應用性能監控和采集應用性能監控和采集系統系統級性級性能數能數據據微架微架構級構級性能性能數據數據機群機群并行并行管理管理機群機群事件事件報警報警Hadoop大數據大數據作業作業能耗能耗性能性能管理管理GPU/

4、MIC性能性能數據數據航天航天航空航空汽車汽車船舶船舶氣象氣象石油石油教育教育科研科研動漫動漫生命生命科學科學進程進程管理管理License使用使用統計統計單機版單機版V0.1.0V1.0.0V1.2.3V2.0.0V2.3.0V3.0.0V4.0.0里程碑里程碑里程碑內容里程碑內容階段階段單機版單機版時代時代2008.02V0.1.0時代時代2008.05V1.0.0時代時代2009.04V2.0.0時代時代2011.09V4.0.0時代時代2013.10V3.0.0時代時代2012.09單機版基本數據單機版基本數據采集和分析采集和分析機群版基本數據機群版基本數據采集和分析采集和分析支持支持

5、IB網絡網絡支持網絡支持網絡文件系統文件系統機群遠程機群遠程命令管理命令管理Parasoft軟件發展歷程軟件發展歷程機群故障報警機群故障報警優化軟件性能優化軟件性能支持支持Gflops等等微架構數據微架構數據支持支持GPU數據數據機群并行命令機群并行命令優化軟件性能優化軟件性能提供應用進程分析提供應用進程分析IO擴展包擴展包集成作業集成作業調度系統調度系統后臺數據采集后臺數據采集簡化軟件安裝簡化軟件安裝優化優化GPU數據采集數據采集提供整體統計分析報表，為整提供整體統計分析報表，為整體規劃決策提供數據支持體規劃決策提供數據支持基于基于IPMI的數據能耗分析管理的數據能耗分析管理基于基于Inte

6、l DCM的數據能耗分的數據能耗分析管理析管理支持支持Intel MIC卡系統級數據卡系統級數據支持支持Intel MIC卡微架構數據卡微架構數據支持支持root權限安裝權限安裝支持普通用戶安裝支持普通用戶安裝任意規模無人值守自動安裝任意規模無人值守自動安裝Hadoop作業可視化作業可視化Map/Reduce進度實時顯示進度實時顯示Parasoft v4.0.0軟件特點軟件特點增強的增強的Parafile切割功能，支切割功能，支持按時間和節點進行切割持按時間和節點進行切割支持支持Parafile導出導出Excel文件文件ParasoftV4.0.0新功能新功能Parafile的的切割轉換切割轉

7、換支持支持Intel Xeon Phi數據中心數據中心能耗管理能耗管理Hadoop數據分析數據分析提供統計提供統計分析報表分析報表任意用戶任意用戶快速安裝快速安裝不同階段用戶需求不同階段用戶需求初級初級硬件導向硬件導向ParaPlus系統實施系統實施Paramon性能評測性能評測工具工具用戶數據中心建設發展歷程用戶數據中心建設發展歷程中級中級高級高級中高級中高級硬件硬件+應用軟件導向應用軟件導向ParaPlus運維服務運維服務Paramon運維工具運維工具基于應用運行特征設計基于應用運行特征設計硬件方案硬件方案+應用軟件支應用軟件支持導向持導向ParaPlus應用特征分應用特征分析服務析服務P

8、aramon機群版機群版全面細致優化自主開發軟全面細致優化自主開發軟件及商業軟件件及商業軟件ParaPlus調優服務調優服務Paramon專業版專業版典型應用場景典型應用場景7.基于現有架基于現有架構的功能定制構的功能定制3.數據中心運數據中心運維及數據統計維及數據統計1.數據中心狀數據中心狀態實時報告態實時報告5.應用運行應用運行性能優化性能優化4.非計劃任務非計劃任務的快速識別的快速識別6.基于應用特基于應用特點的設備選型點的設備選型2.數據中心機群性數據中心機群性能故障快速診斷能故障快速診斷8.數據中心海數據中心海量應用特征庫量應用特征庫典型典型場景場景同一屏幕內機群及應用狀態實時報告同

9、一屏幕內機群及應用狀態實時報告數據中心狀態實時報告數據中心狀態實時報告l 6套機群1350節點實時監控一目了然一目了然數據中心機群性能故障快速診斷數據中心機群性能故障快速診斷數據中心機群性能故障快速診斷數據中心機群性能故障快速診斷診斷流程文件系統是GPFS，所以IO節點的網絡流量是與計算節點進行數據交互產生的；在計算節點的網絡流量監控區域中，以太網流量的產生是計算節點與IO節點數據通信所致；在計算節點的網絡流量監控區域中，InfiniBand網絡流量的產生是計算節點間計算通信所致。數據中心運維數據統計數據中心運維數據統計天分隔線天分隔線數據中心運維及數據統計數據中心運維及數據統計非計劃任務的快

10、速識別非計劃任務的快速識別非計劃任務的快速識別非計劃任務的快速識別該程序把計算資源完全耗盡該程序把計算資源完全耗盡應用運行性能優化應用運行性能優化某負載環境下的VASP應用應用運行性能優化應用運行性能優化某負載環境下的VASP應用blade110節點內存略高節點內存略高該區域只有該區域只有blade110有有Gflops%和和MemBW值值應用運行性能優化應用運行性能優化某負載環境下的VASP應用進入瞬時值模式進入瞬時值模式應用運行性能優化應用運行性能優化某負載環境下的VASP應用基于應用特點的設備選型基于應用特點的設備選型Web服務器支持服務器支持10000個并發連接個并發連接性能測試環境性

11、能測試環境CPU2 sockets 2 cores 2.66GHz XeonMemory8GB，1333MHzOSRed Hat Enterprise Linux 5.3Applicationapache, mysql, phpSoftwareWebbench服務器選型的指導方針服務器選型的指導方針第一階段：網站服務啟動時，建第一階段：網站服務啟動時，建立默認連接，內存利用率上升。立默認連接，內存利用率上升。第二階段：客戶端開第二階段：客戶端開始模擬連接，內存利始模擬連接，內存利用率上升。用率上升。第三階段：內存利用率緩慢第三階段：內存利用率緩慢上升，上升至上升，上升至97.9%時，時，htt

12、p連接數到連接數到2075次。次?；诂F有架構的功能定制基于現有架構的功能定制性能數據文件性能數據文件（.para文件）文件）ClientClientClientClientServer數據數據存儲存儲數據顯示數據顯示前臺系統前臺系統后臺后臺系統系統數據數據分析分析數據中心海量應用特征庫數據中心海量應用特征庫數據中心海量應用特征庫數據中心海量應用特征庫HDFS分布式文件系統分布式文件系統Parafile數據挖掘平臺數據挖掘平臺ParafileParafileParafileParafileParafileMap/ReduceHive Query Language (HQL)Parafile S

13、earch Engine搜索搜索條件條件搜索搜索條件條件搜索搜索條件條件搜索搜索條件條件搜索搜索條件條件Parafile數據挖掘平臺數據挖掘平臺用戶的收益用戶的收益對管理層：對管理層：直觀了解數據中心運營狀態直觀了解數據中心運營狀態快速識別計劃外任務快速識別計劃外任務對數據中心的發展進行預測對數據中心的發展進行預測為采購提供決策依據為采購提供決策依據對應用人員：對應用人員：快速的建立應用運行特征快速的建立應用運行特征快速找到應用運行瓶頸快速找到應用運行瓶頸直觀、準確的進行應用對比分析直觀、準確的進行應用對比分析快速找到應用優化空間快速找到應用優化空間用用20%時間挖掘大到時間挖掘大到80%的優

14、化空間的優化空間對系統管理員：對系統管理員：大規模機群運行狀態可視化大規模機群運行狀態可視化快速進行機群管理操作快速進行機群管理操作掌握機群作業運行情況掌握機群作業運行情況快速對機群進行故障診斷快速對機群進行故障診斷對硬件管理員：對硬件管理員：快速定位硬件故障快速定位硬件故障預防硬件故障發生預防硬件故障發生用戶收益用戶收益“Paramon軟件直觀的反映出機群整體及節點服務器部件的運行情況，使我們能夠軟件直觀的反映出機群整體及節點服務器部件的運行情況，使我們能夠快速的衡量出軟件對硬件的實際需求，能夠準確、高效的建立了軟件與硬件之間的對應關快速的衡量出軟件對硬件的實際需求，能夠準確、高效的建立了軟

15、件與硬件之間的對應關系，尤其在系，尤其在GPU方面，方面，Paramon軟件通過準確、高效的監控管理手段為我中心解決了軟件通過準確、高效的監控管理手段為我中心解決了一系列管理、運維問題，讓機群監控、管理更便捷，更高效，提高了我中心的整體工作效一系列管理、運維問題，讓機群監控、管理更便捷，更高效，提高了我中心的整體工作效率。率?！敝袊臀锾郊夹g研究院信息中心副主任王永波用戶體驗用戶體驗“BGP采購了北京并行科技有限公司采購了北京并行科技有限公司Paramon/Paratune應用運行特征分析軟應用運行特征分析軟件。憑借該系列工具，依據科學的數據統計和分析，其為件。憑借該系列工具，依據科學的數據統計和分析，其為GeoEast軟件系統優化提供了軟件系統優化提供了客觀、準確的基礎數據，其中包括并行科技擁有專利技術的系統微架構級和應用指令級數客觀、準確的基礎數據，其中包括并行科技擁有專利技術的系統微架構級和應用指令級數據，保證了據，保證了GeoEast系統優化的正確性和高效性。后續，系統優化的正確性和高效性。后續，BGP通過通過Paramon軟件對軟件對GeoEast系統幾十種典型的常規處理、解釋模塊，并行處理模塊，偏移模塊