山東網通IP網絡介紹網絡支撐中心1Outline骨干網結構和路由設置骨干網國際互聯電路情況與中國電信互聯電路情況山東IP網絡結構介紹山東IP網絡路由設置MPLSVPN網絡介紹2Outline骨干網結構和路由設置骨干網國際互聯電路情況與中國電信互聯電路情況山東IP網絡結構介紹山東IP網絡路由設置MPLSVPN網絡介紹3骨干網結構和路由設置-骨干網結構

目前，中國網通擁有兩張IP骨干網China169和CNCnet。

China169骨干網分為核心層和匯接層，核心層設備集中在北京、上海和廣州，分為4個核心組，其中北京有1C和2C兩個核心，用于連接各個匯接層設備、國際出口和其他運營商等。匯接層設備每個省各有兩臺，作為每個省的IP互聯網的出口。山東省匯接層設備分別放置于濟南和青島，分別是骨干網濟南A路由器和骨干網青島A路由器，通過共14條長途10G電路與北京核心互聯。4骨干網結構和路由設置-骨干網結構

China169骨干網AS號碼為4837，全網運行iBGP路由協議用于傳遞各省網和國際路由，內部運行IS-IS作為IGP路由協議。匯接層設備與各省網互聯設備之間運行eBGP路由協議，用來控制省網廣播出的路由，并將骨干網和其他運營商的路由廣播到各個省網中去。山東網通通過15條10GPOS電路與China169骨干網匯接設備背對背互聯，其中濟南7條，青島8條。山東省網AS號碼為65010，骨干網匯接設備與省網核心之間運行EBGP協議傳遞路由。5骨干網結構和路由設置-骨干網結構

CNCnet骨干網覆蓋全國53個城市及香港、臺北和美國的洛杉磯3個海外節點。骨干網為三層網絡結構：核心層、一級骨干層和二級骨干層。其中核心層由北京1（北京電報大樓）、北京2（北京亦莊）、上海和廣州4個節點組成，節點間設置直連鏈路；一級骨干層節點16個（含香港和洛杉磯），除海外節點以外均為直轄市或省會城市，這些節點與4個核心節點組成準環形結構；二級骨干層節點37個（含臺北），對于省內節點較多的省份，省內的二級骨干節點基本上采用環形加星形的混合結構就近上聯至核心節點或一級骨干節點；對于省內節點較少的省份，省內的二級骨干節點主要采用星形結構以單鏈路或雙鏈路就近上聯至核心節點或一級骨干節點。6骨干網結構和路由設置-骨干網結構

CNCnet骨干網AS號碼為9929，全網運行iBGP路由協議用于傳遞各省網和國際路由，內部運行IS-IS作為IGP路由協議，同時運行MPLS協議用來承載MPLSVPN客戶業務。CNCnet在山東省內覆蓋濟南、青島、淄博、煙臺、濰坊、威海和日照7個分公司，其中濟南、青島作為省內的核心節點，連接骨干網北京和上海方向。省內中繼為155M電路，成環形和星形混合結構。每個分公司均有75路由器作為專線接入路由器，負責接入個城域網覆蓋范圍內的客戶以及MPLSVPN客戶（全國性的或國際客戶）。7Outline骨干網結構和路由設置骨干網國際互聯電路情況與中國電信互聯電路情況山東IP網絡結構介紹山東IP網絡路由設置MPLSVPN網絡介紹8China169目前有四個出口節點：北京1、北京2、上海和廣州:北京國際出口節點設計容量為20G，目前容量已經飽和。廣州國際出口節點于2004年12月8日正式啟用，設計容量20G，目前所開通的國際電路帶寬已超過了設計容量的70%。上海國際出口節點于2005年12月投入使用，設計容量為10G，目前利用率超過60%。骨干網國際互聯情況9骨干網國際互聯情況方向帶寬北美方向35.2G韓國4.9G日本5G東南亞、港臺6.2G總計51.3G國際重保電路共10條，總帶寬為1440M，包括4×155M-KT、2×155M-NTT、1×155M-Sprint、2×155M-MCI、1×45M-Singapore。10Outline骨干網網結構構和路路由設設置骨干網網國際際互聯聯電路路情況況與中國國電信信互聯聯電路路情況況山東IP網網絡結結構介介紹山東IP網網絡路路由設設置MPLSVPN網網絡介介紹11CNCnet與與中國國電信信Chinanet采用用本地地互聯聯，總總計帶帶寬5.5G與中國國電信信互聯聯情況況－互聯帶帶寬China169與與中國國電信信Chinanet采用用長途途互聯聯，總總計帶帶寬87.5G互聯節點帶寬(G)北京-中國電信北京2.51上海-中國電信上海1廣州-中國電信廣州1互聯節點帶寬(G)北京1-中國電信廣州6×2.530北京2-中國電信上海5×2.53012與中國國電信信互聯聯情況況－電路利利用率率截至2006年年底，，中國國網通通骨干干網國國內出出口總總帶寬寬110.5G。其其中China169與與國內內8個個主要要運營營商開開通直直聯電電路37條條，帶帶寬達達到105G，，同比比增加加83%；；CNCNET與電電信互互聯帶帶寬為為5.5G,同同比未未變化化。China169共共28條國國內互互聯電電路利利用率率超過過70%，，總帶帶寬82.7G,占占比79%。其其中CHINA169與與中國國電信信互聯聯總帶帶寬達達到87.5G，電電路平平均利利用率率為89%，在在每日日09：00-次日日01：00期期間，，電路路仍然然滿負負荷，，擁塞塞嚴重重。13Outline骨干網網結構構和路路由設設置骨干網網國際際互聯聯電路路情況況與中國國電信信互聯聯電路路情況況山東IP網網絡結結構介介紹山東IP網網絡路路由設設置MPLSVPN網網絡介介紹14山東IP網網絡結結構介介紹-IP省省網結結構山東寬寬帶IP省省網由由18臺Juniper設備備組成成，分分為核核心層層和匯匯接層層兩個個層次次，連連接china169骨骨干網網和各各分公公司城城域網網，起起著承承上啟啟下的的重要要作用用。核核心層層包括括濟南南和青青島節節點，，設備備類型型為TX；；匯接接層是是其他他15個分分公司司和省省中心心，設設備類類型為為M160。匯接層層通過過2.5GPOS電路路連接接到濟濟南或或青島島省網網核心心作為為主用用電路路，并并同時時和其其他一一個或或多個個分公公司通通過2.5GPOS電電路連連接作作為備備用電電路。。具體體結構構如下下：15山東IP網網絡結結構介介紹16山東IP網網絡結結構介介紹-IP省省網結結構2006年年，省省公司司對城城域網網進行行雙10G上聯聯改造造工程程，其其中，，濟南南、青青島兩兩個分分公司司城域域網通通過四四條10GPOS電路路分別別與濟濟南、、青島島省網網核心心節點點相連連；煙煙臺、、濰坊坊、淄淄博、、濟寧寧、臨臨沂和和東營營六個個分公公司城城域網網通過過兩條條10GPOS電電路分分別與與濟南南、青青島省省網核核心節節點相相連；；德州州、泰泰安、、菏澤澤、濱濱州、、威海海、棗棗莊和和聊城城七個個分公公司城城域網網，通通過一一條10GPOS電路路濟南南核心心節點點相連連；日日照城城域網網通過過一條條10GPOS電電路與與青島島相連連；萊萊蕪通通過一一條2.5GPOS電電路與與濟南南相連連。其它省省網核核心與與匯接接節點點的互互聯2.5G電電路保保持不不變。。在傳輸輸資源源具備備后，，我們們將為為每個個分公公司補補齊另另一條條10G電電路，，使每每個分分公司司都能能夠至至少有有2條條10G電電路連連接不不同的的省網網核心心節點點。17山東IP網網絡結結構介介紹省網進進行雙雙10G上上聯改改造的的拓撲撲結構構如下下18山東IP網網絡結結構介介紹-省網出出口帶帶寬情情況目前山山東省省出口口總帶帶寬為為140G，其其中濟濟南-北京京方向向有6*10G和4*2.5G電電路，，青島島-北北京方方向有有7*10G電電路。。省網網出口口電路路利用用率情情況如如下圖圖：根據集集團公公司China169四四期工工程規規劃，，山東東省網網上聯聯骨干干網帶帶寬將將達到到200G，電電路將將在今今年年年底前前開通通。19山東IP網網絡結結構介介紹-城域網網結構構山東省省寬帶帶IP城域域網始始建于于2001年5月，，覆蓋蓋全省省17個市市分公公司，，接入入層覆覆蓋到到所有有縣區區。城城域網網按照照核心心層、、匯聚聚層、、接入入層的的三級級構架架建設設，核核心層層配置置高性性能的的路由由器；；匯聚聚層配配置較較高匯匯接能能力的的路由由交換換機和和寬帶帶接入入服務務器；；接入入層大大量采采用三三層交交換機機。城城域網網的網網絡結結構形形式以以星形形、環環形以以及星星形與與環形形結合合的結結構為為主，，典型型的網網絡結結構如如下圖圖所示示：20山東IP網網絡結結構介介紹-城域域網結結構21山東IP網網絡結結構介介紹-城域網網設備備山東網網通城城域網網核心心設備備主要要有Cisco和華華為兩兩種，，青島島采用用的是是Cisco的的CRS-1，，濟南南、淄淄博、、煙臺臺、濰濰坊、、濟寧寧、臨臨沂和和威海海采用用的CiscoGSR12816，，德州州、泰泰安、、菏澤澤、濱濱州、、東營營、棗棗莊、、日照照、萊萊蕪和和聊城城采用用的是是華為為的NE5000E。這這三種種設備備都可可以支支持10G板卡卡，端端口密密度最最大可可以達達到64*10G，，交換換能力力超過過1.28T，，可以以適應應山東東網通通下一一步網網絡發發展。。22山東東IP網網絡絡結結構構介介紹紹-城域域網網設設備備經過過2006年年城城域域網網改改造造，，各各分分公公司司城城域域網網結結構構和和設設備備都都發發生生了了很很大大變變化化，，尤尤其其是是寬寬帶帶接接入入服服務務器器，，大大部部分分分分公公司司更更換換或或新新增增了了能能夠夠更更好好的的支支持持動動態態路路由由協協議議、、MPLS技技術術和和更更高高用用戶戶接接入入能能力力的的高高端端設設備備。。各各分分公公司司采采用用的的寬寬帶帶接接入入服服務務器器如如下下：：設備類型分公司RedbackSE800濟南、青島、淄博、德州、濰坊、濟寧、泰安、菏澤、威海、棗莊華為5200G煙臺、臨沂、濱州、東營、日照、萊蕪聊城城在在本本次次擴擴容容中中，，只只是是增增加加了了部部分分shasta設設備備，，提提高高了了接接入入能能力力，，沒沒有有更更換換寬寬帶帶接接入入服服務務器器。。23Outline骨干干網網結結構構和和路路由由設設置置骨干干網網國國際際互互聯聯電電路路情情況況與中中國國電電信信互互聯聯電電路路情情況況山東東IP網網絡絡結結構構介介紹紹山東東IP網網絡絡路路由由設設置置MPLSVPN網網絡絡介介紹紹24IP網網絡絡路路由由設設置置-省網網路路由由IGP路路由由省網網統統一一啟啟用用ospf作作為為IGP，，ospf主主要要承承擔擔省省內內各各設設備備之之間間的的直直連連路路由由和和靜靜態態路路由由，，作作為為所所有有BGP路路由由next-hop屬屬性性傳傳遞遞的的載載體體，，并并不不承承擔擔省省外外路路由由和和省省內內城城域域網網路路由由的的廣廣播播工工作作。。骨干干區區域域Area0包括括所所有有節節點點的的骨骨干干互互聯聯路路由由器器。。BGP路路由由省網網設設備備之之間間啟啟用用iBGP，，核核心心層層濟濟南南青青島島TX作作為為iBGP中中的的RR路路由由器器。。iBGP承承載載從從骨骨干干網網得得到到的的骨骨干干路路由由和和其其他他運運營營商商的的路路由由，，并并通通過過與與城城域域網網的的EBGP廣廣播播給給城城域域網網；；同同時時也也承承載載從從城城域域網網得得到到的的城城域域網網路路由由，，在在濟濟南南青青島島T640聚聚合合之之后后再再通通過過與與骨骨干干網網之之間間的的EBGP廣廣播播給給骨骨干干網網。。25IP網網絡絡路路由由設設置置-省網網路路由由省網網路路由由控控制制為了了避避免免由由于于各各方方面面原原因因城城域域網網將將錯錯誤誤的的路路由由信信息息廣廣播播至至省省網網，，在在省省網網和和城城域域網網邊邊界界上上配配置置BGP路路由由過過濾濾，，只只允允許許正正確確的的路路由由信信息息通通過過省省網網廣廣播播。。此此外外為為了了減減少少用用戶戶網網絡絡的的波波動動對對省省網網的的影影響響，，城城域域網網將將本本網網的的IP地地址址段段作作整整合合后后再再對對省省網網絡絡進進行行廣廣播播。。省省網網也也在在濟濟南南和和青青島島對對所所有有路路由由進進行行聚聚合合，，聚聚合合后后再再廣廣播播到到骨骨干干網網中中，，這這樣樣城城域域網網路路由由發發生生震震蕩蕩，，也也不不會會對對全全網網路路由由有有太太大大影影響響了了。。26IP網絡絡路由設設置-省網出口口路由策策略出向路由由策略由于目前前骨干網網節點帶帶寬分配配不均衡衡且差異異較大，，因此我我省的出出口流量量分布不不均衡。。省公司司根據濟濟南青島島出口實實際情況況調整目目標AS的local-preference值值，強行行將流量量引導到到濟南或或青島出出省。訪問省外外國內站站點省內訪問問省外國國內站點點根據骨骨干網策策略通過過濟南和和青島TX負載載分擔出出口。訪問國外外站點省內訪問問國外站站點，全全部根據據默認路路由通過過濟南TX出口口。27IP網絡絡路由設設置-省網出口口路由策策略入向路由由策略濟南、青青島TX向骨干干網廣播播山東省省內路由由，通過過設置不不同的metric值值來引導導入向流流量從濟濟南或青青島入省省。由于濟南南、青島島連接北北京各核核心節點點的10G電路路數量和和流量都都不均衡衡，為避避免擁塞塞，我們們將部分分網段引引導優先先從濟南南或青島島入省，，其余的的網段由由骨干網網自己計計算就近近從濟南南或青島島入省。。28IP網絡絡路由設設置-城域網路路由IGP城域網內內部路由由協議采采用OSPF，，不劃分分區域。。這樣設設計是基基于以下下幾點考考慮：按照上述述方式進進行配置置，所有有城域骨骨干路由由器都可可以知道道整個城城域網的的鏈路狀狀態信息息，因此此路由的的選擇精精確度高高。目前城域域網的節節點個數數比較少少，劃分分Area的必必要性不不大，在在今后城城域網節節點個數數變的很很大時再再劃分Area。29IP網絡絡路由設設置-城域網路路由BGP每個城域域網采用用一個獨獨立的保保留的自自治域號號，由省省公司統統一分配配。省網網內部也也使用保保留自治治域號。。省網濟濟南青島島核心設設備與城城域網核核心路由由器之間間運行EBGP路由協協議，省省網接收收城域網網廣播路路由，并并將省內內其他城城域網的的bgp路由廣廣播給城城域網，，從骨干干網接收收到的詳詳細路由由將不廣廣播給城城域網核核心設備備，而是是廣播給給城域網網核心default路由替替換，降降低對城城域網核核心設備備的壓力力。針對統一分配配的保留自治治域號，在省省網出口統一一整合省網地地址，替換掉掉城域網的自自治域號，按按照省網自治治域號廣播至至國家骨干網網。30IP網絡路由由設置-城域網路由省網和城域網網路由圖如下下所示：31Outline骨干網結構和和路由設置骨干網國際互互聯電路情況況與中國電信互互聯電路情況況山東IP網絡絡結構介紹山東IP網絡絡路由設置MPLSVPN網絡介介紹32山東MPLSVPN網網介紹-網絡介紹山東省VPN網絡是架構構在山東寬帶帶IP省網備備份平面上，，以TX和M160作為為P路由器，，各分公司75系列路由由器作為PE路由器用來來接入用戶。。P