1、面向連接的智能運維體系面向連接的智能運維體系 阿里大數據運維實踐大綱大綱Big dataops產品運維歷程產品運維歷程智能運維理念智能運維理念Tesla產品體系產品體系運維價值重塑運維價值重塑01.02.03.04.OTSHadoop0204產品運維歷程產品運維歷程01 Before 2012人工人工&腳本腳本工具整合，業務增長工具整合，業務增長2016智能運維體系建設智能運維體系建設HbaseGalaxyTTHistore MaxComputeAnalyticDBJstormSLS 032014自動化平臺自動化平臺2013501/51:1產品運維歷程產品運維歷程困境 求變 新生201

2、4產品運維歷程產品運維歷程智能運維理念智能運維理念 是否有可以借鑒？ 何種智能理念？ 產品發展方向和終態？智能運維理念智能運維理念末端末端連接連接分析分析展現展現1.末端：直接操作 系統，應用程序，硬件，網絡 的產品。2.分析：實現運維人員思考問題，分析需求，排查故障的產品，3.連接：實現分析與末端產品驅動與反饋的連系產品。4.展現：將智能平臺的狀態 以多種可視化的方式表達出來。AECT-FlowIDPSTDSChangeLineT-cloneStarAgentCMDBICSchangefreeAlimonitorACL智能運維理念智能運維理念T-Flow 工作流工作流 Simple Flow

3、 Multi FlowTesla產品體系產品體系 T-Flow關鍵末端產品關鍵末端產品-系統層指令序列調度的服務系統層指令序列調度的服務Simple FlowTesla產品體系產品體系 T-FlowABCparam1Tesla產品體系產品體系 T-FlowSimple Flow Template/home/admin/update -t _%_param2param3自動忽略自動重試異常報警自動忽略超時時間/home/admin/update -t _%_自動重試異常報警cluster011.1.1.4$cluster011.1.1.5$cluster011.1.1.2$cluster011.

4、1.1.3$cluster011.1.1.4$cluster011.1.1.5$cluster011.1.1.3$ clustre011.1.1.7$/home/admin/tools(-p t 3)-data) module1 yum xxx module1) /home/admin/tools(-precheckyum xxx module1)yum xxx module1)yum xxx/home/admin/tools(-postcheck)-restart)/home/admin/tools(-p 1 t 4) Failed/home/admin/tools(-p 1 t 6)/ho

5、me/admin/tools(-p 1 t 6)Tesla產品體系產品體系 T-FlowSimple Flow Instance1234Simple FlowInstanceTesla產品介紹產品介紹 T-FlowMulti Flow Instance=Tesla產品體系產品體系 T-Flow案例1. GalaxyUpgradePool2. UpgradeRegionServer3. FlightingUpdatesimple flowsimple flowmulti flowTesla產品體系產品體系 T-FlowTesla產品體系產品體系 T-FlowTesla產品體系產品體系 T-Flo

6、wTesla產品體系產品體系 T-Flow30000+實例運行實例運行Tesla產品體系產品體系 T-FlowTesla產品體系產品體系 ICSintelligent Connection ServiceICS關鍵連接服務層關鍵連接服務層-解決事件與末端產品的連接解決事件與末端產品的連接監控事件監控事件日志分析日志分析流程事件流程事件AECT-flowNocTesla產品體系產品體系 ICS外部系統外部系統監控系統1監控系統2日志分析1其他第三方觸發器觸發器監控系統1配置，數據監控系統2配置，數據日志分析1配置，數據其他第三方配置，數據事件處理事件處理插件注冊插件注冊抑制通知抑制通知事件調度事

7、件調度沖突檢查沖突檢查K-V 依賴依賴執行器執行器T-flow 執行器接口AEC執行器接口SSH執行器接口消息訂閱服務末端系統末端系統T-flowAECPSSHTclone其他末端服務intelligent Connection Service系統架構系統架構Tesla產品體系產品體系 ICSintelligent Connection Service案例盤古分布式文件系統一副本高危事件Tesla產品體系產品體系 ICSintelligent Connection ServiceTesla產品體系產品體系 ICSintelligent Connection ServiceTesla產品體系產品

8、體系 ICSintelligent Connection ServiceTesla產品體系產品體系 ICSintelligent Connection ServiceTesla產品體系產品體系 ICSintelligent Connection Service容量檢查，調參/縮擴容硬件異常 ,維修下線分布式文件系統副本高危加速修補核心應用服務Hang 緊急輪換Tesla產品體系產品體系 TDS Troubleshoot Decision Service關鍵末端分析型產品關鍵末端分析型產品-提供通用線上故障智能分析及處理方案提供通用線上故障智能分析及處理方案Checkpoint配置配置執行類型：

9、Check API，Check Script分析結果：example： A，B，C邊條件配置邊條件配置上游節點：Checkpoint下游節點：Checkpoint / ICS上游結果表達式：case=A，case=C ，case=A&B排查點排查點1排查點排查點2排查點排查點3排查點排查點4排查點排查點5日志分析日志分析監控報警監控報警故障工單故障工單ICSTesla產品體系產品體系 TDS Troubleshoot Decision ServiceTDS排查點排查點6排查點排查點7排查點排查點8Tesla產品體系產品體系 AEC & Crond關鍵末端產品關鍵末端產品-應用環境實時維護應用環境實時維護 rpm，文件，目錄，文件，目錄低部署成本，簡單通用灰度發布，低消高效規則多樣,文件模板多級綁定,靈活組合Tesla產品體系產品體系 AEC & Crond關鍵末端產品關鍵末端產品-集中管理線上服務器定時調度任務集中管理線上服務器定時調度任務Crond管理散