1、第 0 頁目錄目錄集中性能管理平臺集中性能管理平臺端到端質量分析客戶感知溯源分析u用戶感知分析u端到端問題定界u集團關注指標第 1 頁11.網絡接入性能 -Attach -PDP -RAB/E-RAB2.業務接入性能 -DNS -SP Connection -Service Request3.數據傳輸性能 -重傳/丟包/亂序 -RTT時延4.移動性 -小區重選 -路由區更新 -2/3/4G互操作5.保持性 -PDP去激活 -RAB/E-RAB釋放 -TCP連接中斷基于對用戶上網全流程的監控，從網絡接入、業務接入、數據傳輸、移動性、保持性五個方面建立用戶感知評估體系。可實現：1、基于用戶感知的網

2、絡質量多維度評估2、從感知到指標再到信令流程的逐級深入分析用戶感知分析第 2 頁2實時用戶定位呼叫回放模擬用戶感知的評估與預警網絡實時監控模擬DT和CQT硬件故障排查用戶感知總體分析第 3 頁3室內、道路、高速、高鐵室內用戶感知異常事件分布結果分析實例平臺輸出室分規格評估結果實例室內用戶感知評估體系監控分析平臺實例應用平臺直觀地輸出室內穩定用戶的分布情況，并且可以結合業務負荷的分布情況，準確評估室分規劃問題。應用平臺將室內用戶的感知問題進行了準確定位，聚焦室內網絡問題，直觀反映室內質差區域的分布。應用平臺以小時為粒度對室內用戶感知及室分質量進行監控及評估，并可對問題下鉆分析，有效支撐了室內質量

3、優化工作。應用3：不同場景下的感知評估用戶感知總體分析第 4 頁用戶感知總體分析-終端n從現網情況出發，因為終端在各個指標的表現上，大有差異，因為我們需要建立數學模型，來評估終端（也可以是網絡能力），嘗試性如下：拿100M的內容(不考包頭這些），給所有的終端，假定網絡能力一樣的情況下，我們計算出每款終端的得分情況，滿分100，可以超過100；公式解釋如下：先轉化為kb,然后除以終端整體速率，終端整體速率（當然里面包括很多不確定因素，但是在大數據的情況下，可以等同忽略）等于速率*訪問成功率，然后以理想狀態下TD速率1.2Mbps，整網訪問成功率來對比下載時長，計算出結果對比百分比。再乘以系數（暫

4、定為2）即為分數：評估終端能力攝取相同流量不同性能終端同網絡狀態414142424343444445454646464749535388101119050100150TD-GT-I8268TD-GT-N7108_NOTE 2TD-GT-I9308G750-T01TD-GT-I9508TD-紅米TD-H30-T00紅米NOTE 1TDVIVO X3L紅米2013022MI3(TD)TD-GT-N9008VIVO TD-X3TTD-GT-S7568TD-R827TTD-R821T紅米1S 2014011IPHONE_5S A1530IPHONE_5S港IPHONE_5S移動TOP20TOP20數量

5、終端性能評分數量終端性能評分050100諾基亞朵唯中興魅族宏達三星OPPO小米TCL華為天語中國移動聯想步步高酷派海信酷比金立奧克斯蘋果品牌評分品牌評分第 5 頁用戶感知總體分析根據右圖可以看出，兩網用戶的使用頻次和時長差別不大，G網微信、微博的人均時長略高于T網。小類業務與業務大類體現的用戶實用速率對用戶使用習慣的影響趨勢基本一致。TOP10流量小類業務中對容忍速率要求較高的業務只有優酷視頻一種，其用戶實用速率T/G比值遠超其他業務，體現了用戶在T網下實際觀看視頻更活躍更流暢。相對而言，微信和新浪微博對速率要求不高，兩網用戶行為習慣基本沒有差異。05001000150020002500300

6、035000.00.51.01.52.02.53.03.54.0微信QQ音樂酷我音樂盒新浪微博淘寶UC網站訪問新浪網騰訊新聞qq空間優酷網TOP業務頻次時長人均頻次（）人均頻次（）人均時長（）人均時長（）051015200.005000.0010000.0015000.0020000.0025000.0030000.0035000.0040000.00優酷網酷我音樂盒淘寶UC網站訪問QQ音樂新浪網騰訊新聞qq空間新浪微博微信用戶實用速率人均流量人均流量（）KB人均流量（）KB實用速率（G)實用速率(T)T/G倍數更快速性能更好的網絡，可以明更快速性能更好的網絡，可以明顯地引導促進用戶使用高速率

7、要顯地引導促進用戶使用高速率要求、高流量的業務。求、高流量的業務。第 6 頁梳理數據業務流程經過的各個重要節點，從各節點特性和常見問題來看影響用戶感知的的主要因素如下：BTSBTSBSCBBPCUGGSNSGSNSGSNFrame Relay NetworkGbIP Network)GnPCUSGSNNetwork Management LANCorporateISP/InternetGi NetworkRouter /FirewallExternalIP networkExternalIP networkServices NetworkRNCAppserver無線網絡核心網絡SPSGSNGG

8、SNMMEeNBeNBIP NetworkIuPSIP NetworkS1S/PGWMS終端問題 終端性能 終端協議參數 軟件適配問題 終端參數設置 終端接入能力 終端支持頻率 終端多時隙能力無線問題無線問題 網絡覆蓋 資源容量 無線干擾 傳輸資源 設備負荷 無線參數 異常重選 設備故障等核心網問題核心網問題 GSN/MME/GW設備負荷 GSN/MME/GW性能 GSN/MME/GW參數問題 接口（如Gb/iuPS/S1/S6a/Gn/Gi等）鏈路負荷 DNS性能、配置等 防火墻、交換機、等網絡設備負荷、路由配置等SP/SP/承載網問題承載網問題 SP自身問題 SP內容移除 SP協議參數 S

9、P到移動網關側的鏈路質量問題 SP到移動網關側鏈路帶寬的問題端到端定界方法端到端定界方法-原因概述原因概述第 7 頁端到端定界方法端到端定界方法-用戶成功率分析思路用戶成功率分析思路用戶成功率類問題分析主要通過接口信令（Gn/Gb/IuPS/S1等）回溯用戶上網業務的主要流程，并通過XDR呈現和統計各個流程的成功率、錯誤碼等信息，根據各流程的錯誤碼及相關維度的統計對比定位對應流程涉及的網元或節點（超時失敗建議采用速率分析方法進行分析）。分析主要流程如下:附著流程主要涉及MS、SGSN/MME、HLR重要節點，根據規范定義錯誤碼可對失敗原因進行節點定位分類，如：GMM-GPRS services

10、 not allowed、IMSI unknown in HLR（多為用戶原因，HLR/HSS中用戶狀態與MS不一致，可針對用戶核查HLR/HSS數據）；Invalid mandatory information（多為終端不規范導致，可修改SGSN參數）等PDP流程主要涉及MS、SGSN/MME、GGSN重要節點，流程錯誤碼根據規范定義可對失敗原因進行定位分類，如： Missing or unknown APN（用戶原因，APN設置錯誤）；Unknown PDP address or PDP type（用戶原因，PDP激活IP地址、IP地址類型等設置錯誤）；Activation rejecte

11、d（網絡原因，多為Gn接口用戶面連接建立失敗，核查Gn鏈路、GGSN狀態）DNS流程主要涉及MS、DNS服務器，流程錯誤碼為規范定義，錯誤碼舉例如：No such name（無此域名，多為用戶URL地址輸入錯誤，可根據不同DNS進行對比分析）；Server failure（服務器錯誤，多為DNS服務器原因）TCP連接流程主要涉及節點為MS、SP，但涉及中間網元對流程影響，對于TCP連接成功率定位方法除事件信令外結合統計進行定位，如：MS發起RST/FIN異常信令，可定位為終端/用戶行為問題；SP發起RST/FIN異常信令，可結合不同SP的連接成功率對比排除中間設備（防火墻、通管設備等）問題后定

12、位。HTTP流程主要涉及節點為MS、WAPGW/SP，流程錯誤定義如下：1xx （臨時響應）；2xx （成功）；3xx （重定向）； 4xx（請求錯誤，MS/SP問題），表示請求可能出錯，妨礙了服務器的處理，如401Unauthorized （多為網站需要鑒權用戶輸入錯誤引起）；5xx （服務器錯誤，SP問題），表示服務器在嘗試處理請求時發生內部錯誤，如503 Service Unavailable（服務器目前無法使用）第 8 頁 通過采集數據統計HTTP業務返回碼，去除記為成功的400以上的狀態碼，如下所示：返回碼業務狀態次數404Not Found754326403Forbidden204

13、514502Bad Gateway124457500Internal Server Error47847503Service Unavailable22315405Method Not Allowed19191504Gateway Timeout12285401Unauthorized11385416Requested Range Not Satisfiable2347505WSP/HTTP Version Not Supported2337408Request Timeout490501Not Implemented398406Not Acceptable376410Gone293402Pa

14、yment Required153411Length Required135412Precondition Failed84407Proxy Authentication Required68415Unsupported Media Type48417Expectation Failed34414Request-URI Too Large19409Conflict5413Request Entity Too Large3509Flow refuse2 其中涉及到SP問題常見代碼“404 Not Found/403 Forbidden/503 Service Unavailable/502 Ba

15、d Gateway/500 Internal Server Error 業務量排名靠前的錯誤碼主要分布在用戶和SP側，用戶原因是不可控的，故解決非用戶原因成為提高HTTP成功率的主要方法；下面我們將進一步提取占比較高錯誤碼的TOP網站進行統計：端到端定界方法端到端定界方法-用戶成功率用戶成功率案例案例HTTP成功率分析第 9 頁 HTTP失敗案例分析 查詢占比最高的404 Not Found流程，如訪問HOST: 的記錄，服務器回應404 Not Found，初步斷定為SP服務器側問題。以URL為維度，二次統計所有用戶登錄該 網站信息，發現該URL的業務失敗率為86.62%。從而進一步推斷為S

16、P服務器問題。SERVICE_SUCCESSSERVICE_SUCCESSSERVICE_FAILSERVICE_FAIL失敗率失敗率1912386.62% 用戶此次登錄的網站為google 的語音搜索，目前大部網站普遍存有鏈接但是內容因時間或其他原因被刪除情況。端到端定界方法端到端定界方法-用戶成功率用戶成功率案例案例第 10 頁端到端定界方法端到端定界方法-用戶成功率用戶成功率案例案例第 11 頁端到端定界方法端到端定界方法-用戶速率分析思路用戶速率分析思路從整個網絡運行狀態入手，排除因網絡故障導致的問題。核查網絡是否有告警、傳輸網絡是否正常、設備各項指標與日常相比是否穩定。確定無上述后再

17、通過各個接口數據逐個進行分析，最終將質差問題定位。從宏觀到微觀是否有網絡故障，基站、BSC/RNC、GSN/MME/GW設備各項指標是否正常從動態到靜態對于單個用戶來說，數據從無線側到核心網側，最后到業務平臺，其過程中無線環境是動態變化的，而有線傳輸、網元設備狀態是相對靜態的。影響用戶感知的因素應先從動態的無線環境入手，然后再分析其他因素。篩選質差（低速率）會話分析用戶業務使用期間的無線問題，包括覆蓋、容量、干擾等方面分析用戶業務使用期間的核心網、業務平臺、終端等問題通過接口信令通過接口信令XDRXDR（GN/Gb/IuPS/S1GN/Gb/IuPS/S1等）等）監測定位質差低速率監測定位質差

18、低速率用戶用戶通過接口信令通過接口信令XDRXDR與與無線無線MR/MR/網管話統網管話統/ /參參數等關聯定位無線問數等關聯定位無線問題題通過接口信令通過接口信令XDRXDR關關聯核心網網管統計聯核心網網管統計/ /參數配置等定位核心參數配置等定位核心網問題網問題通過接口信令中的事通過接口信令中的事件（如件（如windowsize0)windowsize0)、SPSP信息等關聯統計定信息等關聯統計定位業務平臺、終端等位業務平臺、終端等問題問題實現思路第 12 頁端到端定界方法端到端定界方法-用戶速率分析方法用戶速率分析方法通過Gn CDR中的IMSI、業務持續時間關聯MR/網管話統數據定位問

19、題：覆蓋：PCCPCH RSCP*個&用戶上報MR采樣點所占比例干擾：SIR*%的采樣點比例其他：業務持續時間范圍內經過小區數*&平均每小區時長500KB&速率低于500kbps）83條，分析結果如下：容量為3記錄中的也存在覆蓋問題。由分析可知，質差用戶記錄60%左右均是由無線問題導致，無線側質量是影響用戶體驗的關鍵。原因原因 條數條數 占比占比 覆蓋問題 4048.19%容量問題 33.61%干擾問題 56.02%切換問題 11.20%SP問題 56.02%終端問題 67.23%未定位 2327.71%覆蓋問題 容量問題 干擾問題 切換問題 SP問題 終端問題 未定位

20、 第 14 頁端到端定界方法端到端定界方法-用戶速率用戶速率分析案例分析案例第 15 頁l不同業務的用戶體驗點不同，在總部Qoe/KQI/KPI指標框架內，定義了6種關鍵業務（如上），其中網頁瀏覽業務在當前2/3G移動互聯網業務流量的占比在70%以上，是需重點分析的業務。 這也是集團采用綜合下載速率作為重點巡檢指標的原因之一。l但在LTE時代，由于其高帶寬、低時延、多業務調度能力特性，會有越來越多的新的應用（見右圖），如實時視頻類應用，需要針對這些新的主流應用設計相關的指標體系。l基于TD-LTE信令及用戶數據的業務質量指標體系的設計主要有LTE DPI采集解采集解析系統研發、基于業務類型的析

21、系統研發、基于業務類型的KPI指標輸出，指標輸出，KPI/KQI/Qoe的指標體系映射建模的指標體系映射建模等工作等工作TD-LTE的多彩業務集團考核業務性能指標分析第 16 頁場景：對HTTP,EMAIL,流媒體,FTP,IM,APP等細分數據業務質量進行分析,發現用戶在使用業務過程中的存在的問題,指導網優人員針對性進行分析優化.某時段內業務應用情況部分業務指標體系集團考核業務性能指標分析第 17 頁通過區分無線側、網絡側TCP建立時延、RTT、重傳率、擁塞窗口、數據傳輸速率等指標界定無線側、網絡側影響用戶業務質量的原因通過區分無線側、網絡側失敗原因和異常行為分析，界定由于無線側、SP導致業

22、務失敗的情況集團考核業務性能指標分析第 18 頁目錄目錄集中性能管理平臺集中性能管理平臺端到端質量分析客戶感知溯源分析u用戶投訴回溯u基于MR客戶分析第 19 頁19用戶投訴分析投訴原因分析通過對用戶異常上網記錄的分析，從終端、網元、SP等維度定位投訴原因，并提出處理建議l2/3G、lte上網記錄關聯查詢l原始信令查詢l投訴故障分類自動診斷l投訴處理建議l用戶上網行為一鍵分析用戶投訴投訴傾向分析主動探測和篩選網絡中有投訴傾向的用戶并分析可能導致投訴的原因，給客戶服務部門和優化部門提供用戶關懷和網絡調整的依據，盡可能在用戶投訴前解決問題，減少投訴量l異常網元分析l異常SP分析l異常終端分析l異常

23、用戶行為分析第 20 頁20速率低掉線多連不上沒信號SP站點性能統計分析終端測量的精確位置及電平承載層異常信令統計移動性指標RAU/小區重選業務接入指標DNS/SP連接網絡接入指標Attach/PDPTCP傳輸性能分析基于網元設備的指標實時監控基于多種數據源的關聯分析，體現大數據分析的數據類型豐富特性結合內置網絡優化規則引擎對引起用戶投訴的原因進行分析和定位APP終端容量切換覆蓋參數干擾故障用戶投訴-投訴原因分析第 21 頁21用戶投訴分析-投訴預警第 22 頁22利用貝葉斯網絡算法對數據業務用戶質疑流量投訴進行預測模型輸入用戶/終端標識業務地點用戶使用的業務類型、訪問內容格式流量大小、速率、

24、業務狀態數據包間隔、重傳率、丟包率問題出現的規律和頻度模型輸出用戶標識時間范圍可能發生的投訴類型用戶投訴分析-投訴預警第 23 頁2323可根據IMSI或手機號碼篩選特定用戶，查詢該用戶在各個網絡的所有用戶行為用戶上網記錄中包含但不限于以下信息：開始時間、結束時間、業務狀態、狀態碼、IMSI、MSISDN、TAC、ECI、APN、UserIP、業務類型、應用類型、上行流量、下行流量、上行包數、下行包數用戶投訴分析-用戶上網記錄查詢/跟蹤第 24 頁針對用戶，網元，終端，事件，失敗原因多種維度的靈活檢索方式對每個事件的建立，釋放，失敗原因，Uu性能，S1口性能等信息進行綜合呈現對所有接口進行全流

25、程，一站式深入分析分析對任意接口進行單接口信令分析用戶投訴分析第 25 頁全程關聯全程關聯A A、IuCSIuCS、SGsSGs、S1-MMES1-MME，UUUU，X2X2，S6a,S11S6a,S11等接口，用戶所等接口，用戶所有信令行為一目了然有信令行為一目了然全程全程RSRPRSRP，RSRQRSRQ，QCIQCI等等無線環境關聯無線環境關聯分析分析關聯地理信息，精準定位質差位置點擊消息圖標，所有信息聯動變化結合軟采數據或者空口測試數據可實現端到端信令展現，精準定位問題地點，無線環境，網絡參數全程關聯全程全程網絡網絡參數關聯參數關聯分析分析用戶投訴分析-異常xDR記錄發現與關聯分析第

26、26 頁26l自定義用戶異常行為，包括超大流量用戶、頻繁重復建立連接、頻繁PDP激活但無流量、頻繁掉線次數用戶等l自定義門限監控用戶異常行為，實現異常用戶的實時管控l靈活的跳轉及鉆取操作，迅速定位用戶所在區域、網元、終端類型等信息，高效解決用戶問題用戶投訴分析-投訴傾向分析第 27 頁27用戶投訴分析-投訴傾向分析案例第 28 頁基于MR-SCA采集構成SCA MR需要回填需要回填UU,X2數據數據軟采硬采接口與采集方式接口與采集方式采集基礎數據源采集基礎數據源Uu口（軟采）全量MR全量RRC連接/ 管理信令PHR、TA等測量數據吞吐量等統計指標S1-MME口（硬采）E-RAB承載信息上下文管

27、理信息移動性管理信息UE附著、TA更新、尋呼、鑒權、驗證、QoS、IMSI等信息eNB間切換信息、eNB配置更新信令MRO信令：RLF、HO reportX2（軟采）用戶面數據業務類型流量URLS1-U（硬采）S6a：NAS密鑰信息（硬采）S11：S1信令面和用戶面關聯信息（硬采）sGs：CSFB流程信令（硬采）Gn：4G與2/3G互操作信息（硬采） 硬采可選采集硬采可選采集接口接口第 29 頁基于MR-SCA采集構成軟采主要有兩種，一種是北向接口，另一種是SCA（流量匯聚適配器）Uu和X2接口通常通過軟采的方式提供；軟采是由設備廠商提供的SCA設備以IF1的標準格式來輸出數據的。通常一個SC

28、A設備會接入200-1000 eNB的數據通過OMC北向接口輸出的MR數據有時也被稱為軟采數據（此類數據不需要SCA設備）在網絡設備上增加或開放對應的鏡像數據接口，把網元間所發送的數據流鏡像到monitor端口上；流量匯聚適配器（SCA）對數據進行匯聚并添加時間標識送往共享層進行后續處理；eNB、SCA和OMC上的時間同步用NTP協議實現，要求同步精度控制在10ms以內。采集內容包括： Uu接口（必選） X2接口（必選） Uu口協議中未規定的重要參數，如上行測量、上下行吞吐速率等需要廠家按照軟采規范輸出。第 30 頁移動中的通話 TEOCO PROPRIETARY AND CONFIDENTI

29、AL | 30給定一個呼叫(含通話中的一系列事件) 可定位該呼叫的路徑呼叫過程 綜合考慮整個通話中的多個event，并不局限于某單一事件Call Setup (with chip delay)Time 00:00MR 1Time 00:20MR 2Time 00:50MR 3Time 01:31BankPoliceAirportUniversity第 31 頁連續呼叫p同IMSI的兩個間隔時間不長的呼叫過程，相隔距離較近更能增加定位的準確度 TEOCO PROPRIETARY AND CONFIDENTIAL | 31Call set up (with chip delay)Time 00:0

30、0MR 1Time 00:20MR 1Time 01:31BankPoliceAirportUniversityCall set up (with chip delay)Time 00:50第 32 頁與測試路徑的對比紅色 實測路徑 DT position綠色 軟件定位出的路徑業界領先的定位精度站間距的8%12%左右第 33 頁室內/外通話場景分類l基于專有專利算法l基于歷史數據自動創建模型l按區域分類（城區，郊區，鄉村）l可靠性高l約73%的室內通話能成功地自動被識別為來自室內l約76%的室外通話能成功被識別為室外分類l應用場景l了解室內外話務分布比例l判斷問題區域是室外覆蓋弱還是室內深度覆

31、蓋問題導致l得出當地穿透損耗數據，提升規劃精度l指導室內覆蓋優化 TEOCO PROPRIETARY AND CONFIDENTIAL | 33第 34 頁室內室外用戶區分Indoor用戶RSRPOutdoor用戶RSRP室內室外覆蓋分析 室外覆蓋差或室內深度弱覆蓋導致網絡穿透損耗估測室內室外流量話務分析室內室外用戶分布分析用戶移動性分析.第 35 頁地理化呈現豐富的GIS呈現，包括RSRP/Traffic/KPI/掉話等靈活的filter設置篩選功能基于IMSI, IMEI,小區,載頻,時間,indoor/outdoor, static/moving, RAB類型等的filter的靈活篩選靈

32、活的小區及區域選擇功能“拉索”功能：鼠標靈活圈定所選區域或小區第 36 頁KPI專題下鉆流程回放通過軟采信令數據的KPI統計指標，可迅速發現和聚焦在LTE網絡中的TOPN問題小區。對于這些問題小區的KPI專題進行信令關聯和流程回放，可實現主動監控和預警，通過xDR記錄查詢和多接口信令關聯分析，完整再現用戶業務信令過程，進行故障定位。第 37 頁聯合指標篩選高話務低質量區域呈現Combined map - 多個指標聯合篩選高話務低質量區域覆蓋良好質量差區域等等Worst10% 最差RSRP區域.聯合指標篩選呈現第 38 頁Map Analysis強大的Map analysis功能 多個圖層間運算

33、比較不同頻段間的覆蓋對比（D頻段，F頻段）室內室外覆蓋對比（穿透損耗預估）不同終端型號覆蓋對比（終端性能評估）圖層比較分析第 39 頁話務熱點識別話務熱點識別話務熱點識別上下行流量分布圖用戶平均速率分布圖用戶數分布圖呼叫次數分布圖話務top10%呈現指導Small Cell部署等.第 40 頁覆蓋干擾分析40網絡弱覆蓋分析主要按照分區間統計UE參考信號接收功率的樣本個數及采樣點占比，該弱覆蓋度分析數據可用于評估LTE小區的覆蓋情況，根據不同場強區間分布比例可判斷該小區的大致覆蓋范圍。網絡弱覆蓋度=MR_WEAK_COVER_COUNTER/MR_ALL_COUNTER*100%網絡邊緣弱覆蓋度

34、根據LTE服務小區的主載波RSRP的接收信號碼功率及LTE已定義鄰區關系和未定義鄰區關系小區的主載波RSRP的接收信號碼功率計算小區弱覆蓋指數，該指數用于描述某小區覆蓋范圍內信號鄰區疊加的程度。網絡重疊覆蓋度根據LTE服務小區的主載波RSRP的接收信號碼功率及LTE已定義鄰區關系和未定義鄰區關系小區的主載波RSRP的接收信號碼功率計算小區重疊覆蓋指數，該指數用于描述某小區覆蓋范圍內強信號鄰區疊加的程度。網絡過覆蓋分析根據LTE服務小區的主載波RSRP的接收信號碼功率及LTE已定義鄰區關系和未定義鄰區關系小區的主載波RSRP的接收信號碼功率計算小區過覆蓋指數，該指數用于主服務小區會對多少個鄰區造成影響。MOD 3干擾網絡干擾是影響網絡質量的關鍵因素之一，對通話質量、掉話、切換、擁塞以及網絡的覆蓋、容量等均有顯著影響。如何降低或消除干擾是網絡規劃、優化的重要任務之一。干擾分類內部干擾和外部干擾，而外部干擾又包括系統間干擾及其它隨機干擾。網絡干擾是影響網絡質量的關鍵因素之一，對通話質量、掉話、切換、擁塞以及網絡的覆蓋、容量等均有顯著影