【正文】 源造成負擔。層次化調度:7750 的層次化隊列調度是目前業(yè)界最先進的調度方式，如下圖所示：35 / 55Q u e ueQ u e ueQ u e ueQ u e ueQ u e ueQ u e ueW e i g h t edR a t e L i m i t i n gS c h e d u l e rS t r i c t /W e i g h t edR a t e L i m i t i n gS c h e d u l e rS t r i c t /W e i g h t edR a t e L i m i t i n gS c h e d u l e rS t r i c t /W e i g h t edR a t e L i m i t i n gS c h e d u l e rS t r i c t /W e i g h t edR a t e L i m i t i n gS c h e d u l e rS t r i c t / 能夠控制單個業(yè)務或多個業(yè)務的總帶寬，真正實現(xiàn)業(yè)務接入側 SLA 保證。有了這樣的層次化調度，中國移動可以為各種業(yè)務承載、對外業(yè)務提供靈活的SLA。? 考慮話音核心關鍵業(yè)務，應規(guī)劃備份路徑和帶寬預留。7750 的層次化調度將帶寬控制帶到了一個新的靈活的高度，通過多級調度器控制多個隊列的總帶寬，這多個隊列可能來自于同一個業(yè)務或不同的業(yè)務，真正實現(xiàn)了控制一個業(yè)務或多個業(yè)務的總的 SLA。34 / 55網(wǎng)絡側接口的隊列及其調度機制7750 的每個網(wǎng)絡互連接口擁有 8 個出口緩存隊列(使用的總帶寬資源為該端口的物理帶寬)，每個 MDA 擁有 8 個入口緩存隊列被該 MDA 上的所有網(wǎng)絡接口共享 (使用的總帶寬為該 MDA 連接交換矩陣的端口網(wǎng)絡帶寬10Gbps) ，7750 支持 8 個 Diffserv 轉發(fā)等級（NC,EF,H1,H2,AF,L1,L2, BE） ，分別映射到 8 個緩存隊列（在出口和入口雙方向上） ，作為網(wǎng)絡核心路由器時，7750 根據(jù)業(yè)務接入側匯聚過來的流量的數(shù)據(jù)包中帶有的優(yōu)先級表識將數(shù)據(jù)包自動分配到相應的隊列當中，如果是 IP 包，根據(jù)包頭的DSCP 位進行識別，如果是 MPLS 包，根據(jù) Label 上的 EXP 位進行識別。總之，如果 IP 承載網(wǎng)不能保證 IP 承載網(wǎng)中每條鏈路在發(fā)生中斷時的切換時間很短，NGN 和 3G 網(wǎng)絡中的很多對實時性要求較高的業(yè)務將無法開展。29 / 55第五章 承載網(wǎng) QOS 部署 業(yè)務 QoS 要求本 IP 專用承載網(wǎng)是個多業(yè)務的承載網(wǎng)絡，將主要逐步承載如下業(yè)務：? 省際軟交換匯接網(wǎng)的話音業(yè)務? 端局軟交換信令，包括“軟交換匯接網(wǎng)” 、3G CS 核心網(wǎng)以及“省內軟交換架構端局改造”等項目所涉及的 H .24BICC 信令等，暫不考慮 HSTP/LSTP7 號信令網(wǎng)的 IP 化承載需求。 。根據(jù)上述對網(wǎng)絡帶寬需求的估算，結合帶寬規(guī)劃原則，一期建設中的鏈路配置能滿足輕載的要求。 PE 與 CE 的協(xié)議選擇一、對于較小的 VPN 客戶，PE 與 CE 間一般采用靜態(tài)或直連路由即可滿足要求。金橋：金橋 6509 交換機 1 通過 10G GE 接口與同機房的 7750 路由器相連， 6509交換機 2 通過 10G POS 接口與浦東機房的 7750 路由器相連，同機房的 7750 路由器作為主用 PE，不同機房的 7750 路由器作為備用 PE，具體實現(xiàn)是通過在兩臺 6509 交換機上運行 VRRP 協(xié)議，設置不同的優(yōu)先級，讓業(yè)務流量優(yōu)先從主用 PE 流出，當主用 PE 發(fā)生故障時，流量倒換到備用 PE。在相同目標網(wǎng)絡 BGP 條目選路規(guī)則中，根據(jù) BGP 優(yōu)先選路屬性實現(xiàn)選路。? ISIS LSP 存活時間，65535 秒。同時如今后網(wǎng)絡發(fā)展需要，向層次化路由結構的演進亦容易，可以在不中斷業(yè)務的前提下，劃分區(qū)域，逐步割接到多層次化路由結構。網(wǎng)管人員可以清晰的通過路由表，對承載網(wǎng)路由以及業(yè)務路由進行區(qū)分。在 IP專用承載網(wǎng)建成后，將逐步通過專網(wǎng)承載，以確保業(yè)務質量和網(wǎng)絡安全。其中，流媒體業(yè)務平臺和 DSMP 平臺位于欽州；夢網(wǎng)網(wǎng)關和 WAP 網(wǎng)關位于浦東。由于業(yè)界現(xiàn)有設備廠商對于 MSC Server 的光接口支持度不高，且中國移動 3G 核心網(wǎng) MSC Server 設備技術規(guī)范中對于光接口的功能要求為可選，綜合15 / 55前述業(yè)務帶寬需求：? MSC Server 與 L3 交換機間采用 FE 五類屏蔽雙絞線方式進行聯(lián)接；? MGW 采用 GE 光接口光纖直驅方式連入 L3 交換機。表 上海移動現(xiàn)網(wǎng)路由器設備配置表端口配置類型及數(shù)量地點 設備類型 POSSTM16（SM）POSSTM1（SM）GE（SM）GE（MM） FE E1CR1（NE5000E） 8 1AR1（NE80） 6 24 2 5 32 8VRR1（NE404） 1上海 1 節(jié)點（浦東10 層數(shù)據(jù)機房）帶外應急網(wǎng)管路由器1（AR4640）4CR2（NE5000E） 8 1AR2（NE80） 6 24 2 6 32 8VRR2（NE404） 1上海 2 節(jié)點（欽州 4層交換機房） 帶外應急網(wǎng)管路 由器2（AR4640）411 / 55 上海移動本期工程實施后拓撲本期共新增 4 臺阿爾卡特路由器 7750 SR12 分別放置在 4 個局點作為 PE，每臺PE 至不同局點的 CR、PE 和思科 6509 交換機使用 10G POS 口相連，至同局點的 CR、PE和思科 6509 交換機使用 10GGE 口相連。? 模式 5：核心節(jié)點所在省，CR 兼做 BR，同時有 BR/AR 合設的情況，所有流量均經(jīng)過本省所在的核心設備。6 / 55第二章 中國移動 IP 承載網(wǎng)絡架構 IP 承載網(wǎng)拓撲現(xiàn)狀描述中國移動 IP 專用承載網(wǎng)目前的拓撲結構如下圖所示：北 京 沈 陽上 海南 京廣 州成 都武 漢 西 安 CR1CR1CR1CR1CR1 CR2CR1CR1CR2CR2CR22 1 22CR2深圳沈陽 長春 哈爾濱天津北 京銀川呼和浩特石家莊鄭州西寧 濟南蘭州拉薩武漢重慶 成都昆明南寧貴陽 ?？?廣州 佛山 江門廣州 濟南杭州 上海南京合肥 福州 廈門全 國 網(wǎng) 管 中 心惠州東莞核心層為 8 個節(jié)點，分別是北京、上海、廣州、武漢、南京、沈陽、西安、成都，每個核心節(jié)點配置 2 臺路由器（CR） ，在同一節(jié)點的 CR1 和 CR2 路由器之間設置直連的快速倒換鏈路，并根據(jù)實際的傳輸資源在各個核心節(jié)點之間采用不完全網(wǎng)狀連接。中國移動 2022 年開始建設 IP 專網(wǎng)，初期主要作為中國移動 GSM 省間長途話路。按照集團公司《關于近期中國移動 IP 專用承載網(wǎng)省內延伸網(wǎng)絡建設的指導意見》的指導思路，根據(jù)業(yè)務發(fā)展現(xiàn)狀及引入策略，IP 專用承載網(wǎng)省內延伸一期工程（以下簡稱“一期工程” ）需考慮以下業(yè)務的承載和接入需求： ? 省際軟交換匯接網(wǎng)的話音業(yè)務? 軟交換信令：指軟交換匯接網(wǎng)、3G CS 核心網(wǎng)以及省內軟交換架構端局改造等項目所涉及的 、BICC 信令等，暫不考慮 HSTP/LSTP7 號信令網(wǎng)的 IP 化承載需求? 2G GPRS 核心網(wǎng) Gn 接口? 3G 電路域（CS）核心網(wǎng)：指 3G R4 的 CS 話音、可視電話等業(yè)務? 3G 分組域（PS）核心網(wǎng)：指 3G R4 PS GGSN/SGSN Gn 接口數(shù)據(jù)業(yè)務等? 自有業(yè)務系統(tǒng)互聯(lián)等自有業(yè)務的承載，如流媒體等? 省際及省內地市間內部支撐系統(tǒng)聯(lián)網(wǎng)：包括業(yè)務支撐、網(wǎng)管及企業(yè)信息化等IT 支撐系統(tǒng)本實施方案結合上海移動本期工程的具體情況，從如下幾章內容對此次工程的實施計劃和技術方案進行描述：5 / 55網(wǎng)絡拓撲結構承載業(yè)務種類IGP/BGP 路由設計VPN 路由設計QOS 隊列設計設備配置規(guī)范工程實施計劃在整個實施方案的制訂過程中，我們一直遵循如下原則：此方案網(wǎng)絡結構清晰，功能定義合理；匯接層面到核心層面的異地雙歸屬連接極大的提高了原有的單歸雙聯(lián)的可靠性；業(yè)務層面和匯接層面的分離，既通過使用專門的層次保證了業(yè)務流量的分類，又通過減少匯接層面、簡化了核心層的壓力，符合未來長期發(fā)展的需求并適應戰(zhàn)略目標定位。其路由器系統(tǒng)采用層次化配置方式，即：兩個節(jié)點分別配置 1 臺核心路由器NE5000E（CRCR2）和 1 臺接入路由器 NE80（ARAR2） ，并分別配置 1 臺 VPN 路由反射器 NE40（VRR）和 1 臺“帶外”應急網(wǎng)管路由器。隨著3G 網(wǎng)元及應用系統(tǒng)的接入，現(xiàn)網(wǎng)“軟交換匯接網(wǎng)話音” 、 “軟交換匯接網(wǎng)信令” 、 “軟交換匯接網(wǎng)網(wǎng)管” 、 “7 號信令監(jiān)測”和“數(shù)據(jù)信令監(jiān)測”等多組 VPN 的基礎上，將逐步增加“3G PS Gn 數(shù)據(jù)流” 、 “中國移動內部支撐系統(tǒng)”VPN 組；并將 3G 網(wǎng)絡 CS 信令、端局軟交換信令納入到“軟交換匯接網(wǎng)信令”VPN；將 3G 網(wǎng)絡 CS 媒體納入到“軟交換匯接網(wǎng)話音”VPN。GPRS 核心網(wǎng)沿用現(xiàn)有內部局域網(wǎng)組網(wǎng)方式：? 浦東 GPRS 局域網(wǎng)收斂至現(xiàn)有三層交換機 summit 48i，經(jīng)由局域網(wǎng)防火墻，采用 GE 光接口光纖直驅方式、就近以雙歸方式連接到浦東兩臺 L3 交換機。如果 IP 數(shù)據(jù)包目的地址是業(yè)務平臺，則通過本地 IP 專網(wǎng)將 IP 數(shù)據(jù)包轉發(fā)至 WAP 網(wǎng)關，由 WAP 網(wǎng)關進行后續(xù)轉發(fā)；否則認為業(yè)務請求非指向業(yè)務系統(tǒng)，則通過 Gi 接口轉發(fā)至 CMNET。? OA 系統(tǒng)通過現(xiàn)有網(wǎng)絡組織手段實現(xiàn)匯聚，其中通過隧道連接到集團 OA 的一臺匯聚路由器位于長壽，以 FE 五類屏蔽雙絞線（MSTP 方式）雙歸接入欽州節(jié)點的兩臺 L3 交換機。可以滿足今后各類業(yè)務路由的承載需求，包括傳統(tǒng) IP 數(shù)據(jù)業(yè)務，MPLS VPN 業(yè)務的承載，3G、NGN 等語音、多媒體流業(yè)務的路由承載。為降低由于網(wǎng)絡波動對業(yè)務造成影響，本期建設采用 IGP 快速收斂，網(wǎng)絡故障的收斂時間控制在百毫秒級。全網(wǎng)如無特殊策略將按照目標網(wǎng)絡的目的地址方式實現(xiàn)流量選路。22 / 55 MPLS 三層 VPN 設計 自治域部署根據(jù)中國移動集團公司對于 IP 專網(wǎng)全國網(wǎng)絡的規(guī)劃意向，上海移動 IP 專用承載網(wǎng)應考慮與集團 IP 專用承載網(wǎng)的互聯(lián)，實現(xiàn)全國單一自治域組網(wǎng)。 VPN RR 設置中國移動 IP 專用承載網(wǎng)通過 MPiBGP 傳播 MPLS VPN 路由信息。因不同機房的 PE 與 CE 互連時是通過傳輸鏈路的，如果配置靜態(tài)路由，當出現(xiàn)PE－CE 之間的某段鏈路中斷時，會導致流量中斷的情況。具體實現(xiàn)方式如下：7750 路由器與 6509 交換機間、兩臺 6509 交換機間啟用 OSPF 路由協(xié)議，在 7750路由器上將 OSPF 路由引入 MPBGP(注意,在 7750 上,當 PE 與 CE 間運行 EBGP 時,需要手動在兩種路由協(xié)議中作路由重分布,而 PE 與 CE 間運行 RIP、OSPF、靜態(tài)路由、直連路由時，路由會自動重分布的)，建議 OSPF 下發(fā)缺省路由到 6509；兩臺 6509 交換機運行 VRRP 協(xié)議，作為各種 VPN 業(yè)務的網(wǎng)關，以控制流量的流入和流出。? 媒體流：其特點是對網(wǎng)絡端到端的時延和抖動要求都很高不同 NGN 業(yè)務流的 QoS 要求是不同的，針對不同的業(yè)務設置不同的 QoS 策略，語音、視頻、信令、數(shù)據(jù)等業(yè)務流應分為不同優(yōu)先級。在本次工程，由于 7750 路由器可用于網(wǎng)絡匯聚（BR）和業(yè)務邊緣接入（ AR）兩種目的，所以其 QOS 解決方案涵蓋了這兩種不同需求下的各自特性，并將它們結合在一起形成端到端的 IP/MPLS QOS 整體解決方案，其整體 QOS 架構模型如下：QoSPlicy MangemtgRutiClasfconMrkigBndwth CrloesiAvoidanceCgt trlSrvic L SpeciftnDirectoy andPlicy ServisAdsiCtroQSRviConstraibsed RutingLye 4lifcao3ir2sta MkingLyShpiPolcaer 4Flw ContrlLy2SltivDscadQu huligBfre在這個模型中，將端到端的 QOS 處理分成八個方面，它們分別屬于業(yè)務接入側和網(wǎng)絡核心側兩個部分的內容，7750 路由器也針對這兩部分內容提供不同 QOS 策略和隊列及調度機制，如下圖所示：32 / 55下面將介紹 7750SR 業(yè)務接入側和網(wǎng)絡側的 QOS 策略。當 7750 將數(shù)據(jù)包轉發(fā)給下一跳路由器時，數(shù)據(jù)包將攜帶轉發(fā)等級、Inprofile（CIR 以內）和 Outprofile（CIR 和 PIR 之間）等優(yōu)先等級信息到達下一跳路由器，下一跳路由器同樣根據(jù)相同的 Diffserv 優(yōu)先級映射規(guī)則識別數(shù)據(jù)包的轉發(fā)等級并將其放入相應的接口隊列進行調度。 PIR =20 MbpsC4Subscrier VLANCIR = 20 VoIP(prioity 1)PIR =20 bpsCKPIR =20 bpsC9KOD (prioity 2)HSI (shaped amp