云網(wǎng)融合一體化支撐能力探索和應(yīng)用

何均均 王江舟 李 輝

中國(guó)移動(dòng)通信集團(tuán)江蘇有限公司南通分公司

0 引言

近年來(lái)，隨著移動(dòng)“CHBN”（Customer、Home、Business、New，個(gè)人市場(chǎng)、家庭市場(chǎng)、政企市場(chǎng)、新興市場(chǎng)）業(yè)務(wù)的飛速發(fā)展，云網(wǎng)融合成為必行之勢(shì)。江蘇移動(dòng)在云網(wǎng)建設(shè)上起步較晚，但經(jīng)過(guò)持續(xù)發(fā)力，目前在云網(wǎng)上已經(jīng)初具規(guī)模，具有較大的市場(chǎng)競(jìng)爭(zhēng)力。在新形勢(shì)下，如何更好地提供云網(wǎng)一體化的網(wǎng)絡(luò)能力，高效支撐業(yè)務(wù)發(fā)展還面臨著以下三點(diǎn)挑戰(zhàn)：（1）目前，公有云的發(fā)展已相對(duì)成熟，但私有云產(chǎn)品的定制和推廣效率較低，缺乏成熟的一體化網(wǎng)絡(luò)解決方案和融合產(chǎn)品，特別是跨區(qū)域、跨地市的私有云產(chǎn)品，更需要穩(wěn)定、可靠和安全的入云方式，而當(dāng)前系統(tǒng)無(wú)法滿足重點(diǎn)客戶的私有云融合組網(wǎng)需求。（2）移動(dòng)的云網(wǎng)融合產(chǎn)品仍比較單一，只支持點(diǎn)對(duì)點(diǎn)PTN（Packet Transport Network，分組傳送網(wǎng)）云專線，且PTN 專線開(kāi)通成本高，調(diào)測(cè)周期較長(zhǎng)，無(wú)法滿足集團(tuán)客戶多種方式接入和快速入云的需求。（3）對(duì)于大量已在其他公有云上部署業(yè)務(wù)的客戶，移動(dòng)運(yùn)營(yíng)商缺乏具有核心競(jìng)爭(zhēng)力的產(chǎn)品，無(wú)法提供不可替代的粘性云服務(wù)。

1 技術(shù)方案

1.1 背景說(shuō)明

為了解決目前云網(wǎng)融合一體化所面臨的挑戰(zhàn)，本文研究并實(shí)踐了江蘇省內(nèi)云網(wǎng)融合一體化網(wǎng)絡(luò)接入方案，通過(guò)地市云網(wǎng)互聯(lián)產(chǎn)生合力，MPLS-VPN（Multi-Protocol Label Switching-Virtual Private Network，采用多協(xié)議標(biāo)簽轉(zhuǎn)換技術(shù)構(gòu)建IP專網(wǎng)）、SD-WAN（Software Defined Wide Area Network，軟件定義廣域網(wǎng)）融合，整合全省云資源，做到內(nèi)部資源最優(yōu)化，保障了云網(wǎng)業(yè)務(wù)的快速接入，提供了靈活快捷的業(yè)務(wù)開(kāi)通方式，屬于全行業(yè)領(lǐng)先的系統(tǒng)應(yīng)用。

1.2 云網(wǎng)建設(shè)

1.2.1 省級(jí)拓?fù)?/p>

方案設(shè)計(jì)如圖1 所示，在全省13 個(gè)地市各新建一對(duì)云網(wǎng)PE(Provider Edge，即Provide 的邊緣設(shè)備)，設(shè)置3 對(duì)P(Provider，提供商路由器)節(jié)點(diǎn)實(shí)現(xiàn)任意兩地市之間的云間互聯(lián)最低時(shí)延，分別為南京、無(wú)錫（與蘇州合設(shè)）和淮安。其中南京P 節(jié)點(diǎn)用于南京、揚(yáng)州、鎮(zhèn)江和泰州的云網(wǎng)PE 接入，無(wú)錫（與蘇州合設(shè)）P 節(jié)點(diǎn)用于常州和南通的云網(wǎng)PE 接入，淮安P 節(jié)點(diǎn)用于淮安、宿遷、徐州、連云港和鹽城的云網(wǎng)PE接入。

圖1 江蘇移動(dòng)云網(wǎng)拓?fù)?/p>

各地市的云網(wǎng)PE 接入建設(shè)原則為利用現(xiàn)有的NCE-IP（Network Cloud Engine，網(wǎng)絡(luò)云引擎），實(shí)現(xiàn)所有云網(wǎng)PE 以及P 節(jié)點(diǎn)的管控，各地市云網(wǎng)PE 與P 節(jié)點(diǎn)的連接，直連鏈路以“利舊為主，按需新建”為原則。

綜合地市設(shè)備接入方案為各地市NCE-SPN（Slicing Packet Network，切片分組網(wǎng)）管理云專線網(wǎng)絡(luò)SPN 設(shè)備，并新建一對(duì)云網(wǎng)PE，建立專線接入網(wǎng)絡(luò)。地市云新建一對(duì)云網(wǎng)PE，作為本地市云專線入云的落地PE。云網(wǎng)PE 增加連接城域SPN設(shè)備的鏈路，通過(guò)口字形組網(wǎng)實(shí)現(xiàn)云網(wǎng)PE 和SPN 互聯(lián)。云網(wǎng)PE 連接本地云DC-GW（Data Center-Gateway，數(shù)據(jù)中心網(wǎng)關(guān)）設(shè)備的鏈路，通過(guò)口字形組網(wǎng)實(shí)現(xiàn)云網(wǎng)PE 和云GW 互聯(lián)。

業(yè)務(wù)管理上，二級(jí)編排器與SC 控制器（Super controller，超級(jí)控制器）NCE-Super 和云管理平臺(tái)對(duì)接，SC 控制器NCESuper 與NCE-SPN 和NCE-IP 對(duì)接。業(yè)務(wù)開(kāi)通上，二級(jí)編排器基于業(yè)務(wù)平臺(tái)訴求，調(diào)用SC 控制器創(chuàng)建專線，主要包括：（1）編排器轉(zhuǎn)換相關(guān)的業(yè)務(wù)信息和參數(shù)發(fā)給NCE-Super；（2）NCE-Super 將配置參數(shù)下發(fā)對(duì)應(yīng)的NCE-IP；（3）NCE-IP 按業(yè)務(wù)類型下發(fā)配置到設(shè)備，完成業(yè)務(wù)發(fā)放。

如圖2 所示，南通建設(shè)的SPN 域，共設(shè)置8 臺(tái)設(shè)備，其中2 臺(tái)PTN980 接入設(shè)備，2 臺(tái)PTN7900-X12 作為普通匯聚，2 臺(tái)PTN7900-X12 作為骨干匯聚，2 臺(tái)PTN7900-24 作為核心設(shè)備。新增一對(duì)云網(wǎng)PE 設(shè)備，與無(wú)錫（蘇州）的云網(wǎng)PE 設(shè)備互聯(lián)。部署8 臺(tái)SPN 安裝和互聯(lián)，并通過(guò)NCE-SPN 納管，打通SPN 核心設(shè)備至NCE-SPN 的DCN 管理平面。南通二機(jī)樓的2 臺(tái)云網(wǎng)PE 和SPN 核心互聯(lián)，云網(wǎng)PE 至云DC-GW實(shí)現(xiàn)互聯(lián)，云網(wǎng)PE 至NCE-IP（南京江北IDC 機(jī)房）則通過(guò)DCN（Data Communication Network，數(shù)據(jù)通信網(wǎng)）打通路由，包括控制域IPv6 打通。NCE-Super（南京）與NCE-SPN、NCE-IP 之間連接，打通云網(wǎng)PE 至無(wú)錫（蘇州）的云網(wǎng)PE 傳輸電路。

圖2 南通地市云網(wǎng)拓?fù)?/p>

1.2.3 接入拓?fù)?/p>

設(shè)備部署DCN 功能，使NCE 能夠加載管理設(shè)備。使用網(wǎng)關(guān)與非網(wǎng)關(guān)組合方案，如圖3 所示，對(duì)于整個(gè)PTN 網(wǎng)絡(luò)，與外部DCN 網(wǎng)絡(luò)直連的PTN 7900E/PTN 7900 作為網(wǎng)關(guān)網(wǎng)元，未與外部DCN 網(wǎng)絡(luò)直連的接入層、匯聚層節(jié)點(diǎn)作為非網(wǎng)關(guān)網(wǎng)元，網(wǎng)關(guān)網(wǎng)元通過(guò)管理口與外部DCN 網(wǎng)絡(luò)連接，全網(wǎng)采用管理平面DCN 方案進(jìn)行管理。

圖3 南通移動(dòng)SPN 域云網(wǎng)拓?fù)?/p>

1.3 業(yè)務(wù)組織

1.3.1 業(yè)務(wù)接入設(shè)計(jì)

首先介紹業(yè)務(wù)承載方案，云網(wǎng)PE 作為企業(yè)租戶的網(wǎng)關(guān)，直接配置到租戶的靜態(tài)路由，云網(wǎng)PE 配置本地L3VPN，每專線每VPN，每VPC（Virtual Private Cloud，虛擬私有云）每VPN，VPN 間通過(guò)RT 互通。SPN 配置端到端VLL over SR-TP業(yè)務(wù)，采用SR-TP APS1:1 保護(hù)。SPN 和云網(wǎng)PE 對(duì)接，SPN側(cè)配置手工LAG（主備模式），云網(wǎng)PE 配置雙歸E-Trunk 雙活保護(hù)（主備模式）。

其次，業(yè)務(wù)發(fā)放流程如圖4 所示。（1）業(yè)務(wù)發(fā)放界面選擇業(yè)務(wù)套餐并觸發(fā)業(yè)務(wù)配置下發(fā)給編排器；（2）編排器轉(zhuǎn)換相關(guān)的業(yè)務(wù)信息和參數(shù)發(fā)給NCE-Super；（3）NCE-Super 將配置參數(shù)下發(fā)對(duì)應(yīng)的NCE-IP；（4）NCE-IP 按業(yè)務(wù)類型下發(fā)配置到設(shè)備，完成業(yè)務(wù)發(fā)放。

圖4 云網(wǎng)業(yè)務(wù)承載發(fā)放

1.3.2 云互聯(lián)方案設(shè)計(jì)

今年以來(lái)，市場(chǎng)經(jīng)濟(jì)發(fā)展形勢(shì)比預(yù)期好，楚雄武定供電局抓住有利時(shí)機(jī)積極開(kāi)展增供擴(kuò)銷(xiāo)。通過(guò)走訪、加大優(yōu)惠電價(jià)政策宣傳，減少停電、提升客戶服務(wù)、推進(jìn)市場(chǎng)化交易、積極與政府溝通匯報(bào)等方式穩(wěn)住存量。讓政策支撐、管理保障、市場(chǎng)拓展、服務(wù)提升多項(xiàng)措施齊頭并進(jìn)，全力做好增供擴(kuò)銷(xiāo)。

首先介紹業(yè)務(wù)承載方案，同一租戶的多云VPC 之間有互聯(lián)訴求，云網(wǎng)PE 之間配置EVPN L3VPN，承載隧道采用SRv6 Policy &SRv6 BE，部署HSB&VPN FRR。云網(wǎng)PE 和云網(wǎng)關(guān)之間使用靜態(tài)路由/EBGP（External Border Gateway Protocol，外部邊界網(wǎng)關(guān)協(xié)議），省內(nèi)云骨干采用信道化子接口分片方案。

其次介紹業(yè)務(wù)發(fā)放流程，如圖5 所示。（1）業(yè)務(wù)發(fā)放界面選擇業(yè)務(wù)套餐并觸發(fā)業(yè)務(wù)配置下發(fā)給編排器；（2）編排器轉(zhuǎn)換相關(guān)的業(yè)務(wù)信息和參數(shù)發(fā)給NCE-Super；（3）NCE-Super將配置參數(shù)下發(fā)對(duì)應(yīng)的NCE-IP；（4）NCE-IP 按業(yè)務(wù)類型下發(fā)配置到設(shè)備，完成業(yè)務(wù)發(fā)放。

圖5 云互聯(lián)業(yè)務(wù)承載發(fā)放

1.3.3 業(yè)務(wù)實(shí)現(xiàn)場(chǎng)景

該云網(wǎng)融合支撐系統(tǒng)支持豐富的業(yè)務(wù)功能和業(yè)務(wù)場(chǎng)景，如表1 所示，支持云專線（一線多云、靈活調(diào)整）、5G 云專線、云組網(wǎng)/云專網(wǎng)和云資源池互聯(lián)等，使云網(wǎng)融合產(chǎn)生業(yè)務(wù)大合力。

表1 業(yè)務(wù)實(shí)現(xiàn)功能及場(chǎng)景

2 主要?jiǎng)?chuàng)新點(diǎn)及先進(jìn)性

2.1 主要?jiǎng)?chuàng)新點(diǎn)

（1）豐富接入：本系統(tǒng)依托豐富的云資源和網(wǎng)絡(luò)資源，為企業(yè)上云提供多檔差異化的入云專線服務(wù)，提供云業(yè)務(wù)與專線業(yè)務(wù)一站式服務(wù)，具備業(yè)務(wù)自動(dòng)化開(kāi)通、帶寬彈性可調(diào)和多樣化接入等特點(diǎn)。

（2）泛在聯(lián)接：面向固定光纖無(wú)法接入或者接入困難的企業(yè)及其分支機(jī)構(gòu)，本系統(tǒng)利用5G 網(wǎng)絡(luò)，實(shí)現(xiàn)快速、高效、可靠入云接入。針對(duì)大型互聯(lián)網(wǎng)企業(yè)的2B2C 場(chǎng)景，本系統(tǒng)能為其提供低時(shí)延的服務(wù)保障。

（3）專網(wǎng)專用：為企業(yè)提供基于切片技術(shù)的分支入云及分支互聯(lián)的云專網(wǎng)服務(wù)。結(jié)合基于AI 的SDN 化管控系統(tǒng)，向用戶提供快速接入、靈活組網(wǎng)、高可靠、穩(wěn)定低時(shí)延和切片隔離的差異化云專網(wǎng)服務(wù)。

（4）多云互聯(lián)：云互聯(lián)基于省內(nèi)云專網(wǎng)網(wǎng)絡(luò)，打通各個(gè)地市云資源池，為客戶提供跨資源池的云內(nèi)VPC 高速互訪通道，助力企業(yè)輕松構(gòu)建異地災(zāi)備和應(yīng)用分布式部署等高可用網(wǎng)絡(luò)。

2.2 先進(jìn)性

（1）業(yè)務(wù)快速開(kāi)通：跨域超級(jí)控制器SC 實(shí)現(xiàn)業(yè)務(wù)天級(jí)開(kāi)通，提供業(yè)務(wù)級(jí)接口與二級(jí)編排器對(duì)接，簡(jiǎn)化集成，快速實(shí)現(xiàn)自動(dòng)化業(yè)務(wù)發(fā)放。同時(shí)，可提供跨城域和省干、跨SPN 和云網(wǎng)PE、跨廠家協(xié)同、智能切片的功能，使業(yè)務(wù)帶寬能夠靈活調(diào)整。

（2）端到端SLA 質(zhì)量可視：按需使能業(yè)務(wù)iFit，可以逐跳完成時(shí)延和丟包等業(yè)務(wù)質(zhì)量上報(bào)，提供對(duì)外的API 接口，供第三方調(diào)用，實(shí)現(xiàn)用戶APP 業(yè)務(wù)SLA 可視。

（3）業(yè)務(wù)主動(dòng)運(yùn)維：通過(guò)iFit 業(yè)務(wù)逐條可視，從而實(shí)現(xiàn)故障快速定位定界；根據(jù)故障點(diǎn)信息，NCE 進(jìn)行路徑優(yōu)化，實(shí)現(xiàn)故障自動(dòng)恢復(fù)；通過(guò)歷史流量和故障大數(shù)據(jù)分析，提前預(yù)測(cè)故障并指導(dǎo)現(xiàn)網(wǎng)擴(kuò)容等。

3 應(yīng)用效果

3.1 整體應(yīng)用情況

目前，云互聯(lián)已經(jīng)在江蘇利群成功落地實(shí)施，涉及省內(nèi)云網(wǎng)互聯(lián)多個(gè)點(diǎn)位，包括南通、泰州、宿遷各5 個(gè)點(diǎn)位，鹽城和揚(yáng)州各4 個(gè)點(diǎn)位等。

SPN 入云方案已在如東洋口港企業(yè)落地實(shí)施，并且為客戶5G 入云帶來(lái)了合作可能以及快速便捷的入云體驗(yàn)。

IPSec 快速入云方案為有上云需求的物聯(lián)網(wǎng)客戶提供靈活性高、性價(jià)比高的云服務(wù)，已在南通立訊智造科技（如皋）有限公司的云監(jiān)控項(xiàng)目落地實(shí)施，為客戶提供安全、穩(wěn)定、加密的云服務(wù)，是云網(wǎng)融合的典型應(yīng)用。

5G 專網(wǎng)入云的方案已在南通中遠(yuǎn)重工有限公司落地實(shí)施，并在中天推廣，客戶可以通過(guò)5G 終端接入移動(dòng)云主機(jī)，實(shí)測(cè)端到端速率下行為700+Mbps，上行為100+Mbps，端到端時(shí)延在15ms 左右，支撐客戶5G 船舶制造、客戶智慧制造，滿足客戶對(duì)新網(wǎng)絡(luò)的需求，也樹(shù)立了江蘇移動(dòng)在新業(yè)務(wù)領(lǐng)域的良好口碑。

同時(shí)基于云專網(wǎng)的入云方案，南通本地云主機(jī)和合營(yíng)云主機(jī)實(shí)現(xiàn)互通，滿足了客戶靈活的業(yè)務(wù)需求，為移動(dòng)云業(yè)務(wù)的發(fā)展帶來(lái)了新的動(dòng)力，云間互操作成為可能，后續(xù)將逐步進(jìn)行云網(wǎng)備份和遷移業(yè)務(wù)的拓展。

3.2 社會(huì)效益

云網(wǎng)融合是未來(lái)云計(jì)算領(lǐng)域的發(fā)展趨勢(shì)，大部分企業(yè)已開(kāi)始采用云計(jì)算技術(shù)部署信息系統(tǒng)，企業(yè)上云意識(shí)和能力也不斷增強(qiáng)。5G 專線作為一種靈活便捷的移動(dòng)云接入方式，具有大帶寬、低時(shí)延、海量連接和可移動(dòng)的基礎(chǔ)網(wǎng)絡(luò)特性，能為企業(yè)節(jié)省大量布線成本，容易得到企業(yè)的青睞。IPSec、SDWAN 和MPLS-VPN 入云具有著成本低和開(kāi)通快的優(yōu)勢(shì)，同時(shí)享有很高的安全性，為各類大中小企業(yè)辦公提供了輕量化和低成本的上云解決方案。我司積極進(jìn)行云網(wǎng)一體化網(wǎng)絡(luò)能力構(gòu)建的探索與實(shí)踐，以云促網(wǎng)，以網(wǎng)帶云，以行業(yè)標(biāo)桿帶動(dòng)整體發(fā)展，全力支撐云網(wǎng)業(yè)務(wù)。

3.3 可推廣性

本方案各類模式組網(wǎng)拓?fù)淝逦O(shè)備配置腳本可參考，具備可復(fù)制性，并且已經(jīng)在南通本地進(jìn)行了復(fù)制應(yīng)用。5G+邊緣計(jì)算方案在中天集團(tuán)落地實(shí)施，極大提升了移動(dòng)云和5G 專網(wǎng)在行業(yè)的影響力，樹(shù)立了行業(yè)標(biāo)桿。其他SPN 和專線入云方案在各大中小企業(yè)的實(shí)施，為移動(dòng)云網(wǎng)一體化的融合拓展提供了強(qiáng)有力的例證。本云網(wǎng)一體化支撐系統(tǒng)是云網(wǎng)業(yè)務(wù)的先行示范，可以在全省甚至全集團(tuán)進(jìn)行大規(guī)模的推廣應(yīng)用。

4 結(jié)束語(yǔ)

本文提出的云網(wǎng)一體化業(yè)務(wù)支撐系統(tǒng)，依托豐富的云資源和網(wǎng)絡(luò)資源，為企業(yè)上云提供了多檔差異化的入云專線服務(wù)。針對(duì)固定光纖無(wú)法接入或者接入困難的企業(yè)及其分支機(jī)構(gòu)，可利用5G 網(wǎng)絡(luò)，實(shí)現(xiàn)快速、高效、可靠入云接入，同時(shí)為企業(yè)提供基于切片技術(shù)的分支入云及分支互聯(lián)的云專網(wǎng)服務(wù)，具有多云互聯(lián)的優(yōu)勢(shì)，助力企業(yè)輕松構(gòu)建異地災(zāi)備、應(yīng)用分布式部署等高可用網(wǎng)絡(luò)。目前，云互聯(lián)、SPN 入云方案、IPSec 快速入云方案和5G 專網(wǎng)入云方案均已成功落地實(shí)施，為客戶帶來(lái)了快速便捷的入云體驗(yàn)，滿足了客戶靈活的業(yè)務(wù)需求，為移動(dòng)云業(yè)務(wù)的發(fā)展帶來(lái)了新動(dòng)力，屬于全行業(yè)領(lǐng)先的系統(tǒng)應(yīng)用。