3500節(jié)點！中國移動聯(lián)合華為成功交付超大規(guī)模分布式存儲集群

導(dǎo)語：2020年9月，中國移動集團網(wǎng)絡(luò)云5GC（5G核心網(wǎng)絡(luò)云）項目全面上線商用，繼續(xù)領(lǐng)銜5G基礎(chǔ)設(shè)施建設(shè)。華為以高質(zhì)量和效率交付超過3500節(jié)點大規(guī)模OceanStor海量存儲，通過領(lǐng)先的產(chǎn)品能力和大規(guī)模工程交付經(jīng)驗，助力中國移動5GC項目按期上線。

5G戰(zhàn)略加速，5GC核心網(wǎng)絡(luò)云建設(shè)成為關(guān)鍵

繼2019年全球幾十家Top電信運營商紛紛宣布5G商用之后，5G基礎(chǔ)設(shè)施建設(shè)在全球范圍內(nèi)如火如荼地展開。在國內(nèi)，中國移動、中國電信和中國聯(lián)通三大運營商于2019年11月1日正式上線了5G商用套餐，標(biāo)志著國內(nèi)正式邁入5G時代。截止今年6月，中國移動已在全國范圍部署14萬個5G基站，成為5G商用的先行者，并表示將進一步加快網(wǎng)絡(luò)建設(shè)，確保年內(nèi)累計建成30萬個5G基站目標(biāo)，實現(xiàn)在全國所有地級以上城市提供5G商用服務(wù)。

為了打造適應(yīng)5G業(yè)務(wù)特點的基礎(chǔ)設(shè)施平臺，提供更好的5G服務(wù)，中國移動全面啟動了面向5GC網(wǎng)絡(luò)云建設(shè)。通過包含網(wǎng)絡(luò)、存儲、計算等在內(nèi)的5G基礎(chǔ)設(shè)施云化建設(shè)，在保障為最終用戶提供高質(zhì)量通信及數(shù)據(jù)服務(wù)的同時，降低運營成本，提高管理、維護及業(yè)務(wù)部署效率，降低整體能耗，并為未來創(chuàng)新業(yè)務(wù)的快速上線提供準(zhǔn)備。

作為核心業(yè)務(wù)系統(tǒng)，5GC項目對存儲系統(tǒng)的功能、性能、可靠性、易用性的要求極為嚴(yán)苛。通過長達半年的選型測試與招標(biāo)，最終華為以第一份額中標(biāo)。

更嚴(yán)苛的交付要求，只為更好的5G體驗

本次5GC網(wǎng)絡(luò)云專為移動5GC網(wǎng)元部署而建設(shè)，是中國移動5G SA網(wǎng)絡(luò)建設(shè)的關(guān)鍵一步，建成后將運行多種類型的5G業(yè)務(wù)：

?一類是核心業(yè)務(wù)網(wǎng)元數(shù)據(jù)流量，承載前端5G基礎(chǔ)語音、數(shù)據(jù)、消息等類別的關(guān)鍵業(yè)務(wù)；

?二類是網(wǎng)管數(shù)據(jù)流量，在全國包含華北、東北、華中、東南、華南、西南、西北等在內(nèi)“八大城市”網(wǎng)絡(luò)布局，均需滿足毫秒級穩(wěn)定低時延響應(yīng)、多區(qū)域?qū)崟r容災(zāi)、海量彈性擴展、全區(qū)域可管可控等電信級交付要求。

以上兩種類型的業(yè)務(wù)，分別采用兩類獨立的存儲資源池來承載。如何按時、按質(zhì)完成項目交付，并保證5G網(wǎng)絡(luò)的用戶體驗，才是對中國移動與華為的產(chǎn)品能力、交付能力的關(guān)鍵考驗。整體項目交付面臨如下三大挑戰(zhàn)：

?交付工期緊張：項目交付于3月啟動硬件集成，4月完成軟件集成（包含存儲、交換、虛擬化平臺、網(wǎng)元、PaaS和O+等），需要在6月完成驗收打通First Call，9月全業(yè)務(wù)完成上線、平臺商用。存儲作為最底層基礎(chǔ)設(shè)施，需要給其他上層網(wǎng)元、應(yīng)用部署預(yù)留充足的時間，是真正的時間緊、任務(wù)重。

?交付工作量大：需交付超過3500個分布式存儲節(jié)點，累計配置條目萬級，涉及大量方案設(shè)計、參數(shù)配置、環(huán)境檢查、深度巡檢等工作，由于還需與第三方平臺對接，涉及大量設(shè)計、溝通對接工作。

?交付質(zhì)量要求高：存儲作為業(yè)務(wù)平臺的關(guān)鍵支撐，一旦部署完成后再進行修改，必然牽一發(fā)而動全身。因此要求一次性交付成功，不允許交付后進行包括配置參數(shù)在內(nèi)的任何修改。

圖1：中國移動5GC項目交付里程碑

實際交付中，華為以專業(yè)的工程化交付運作機制保障了項目的高質(zhì)量、高效率交付。提前梳理風(fēng)險、制定模板化交付手冊、并行運作等機制，保障問題處理零等待，體現(xiàn)了三個專業(yè)性領(lǐng)先：針對海量設(shè)備交付進度風(fēng)險，提前規(guī)劃專有存儲集群配置工具，縮短集群部署時間90%，實現(xiàn)存儲交付進度領(lǐng)先；建立完善的溝通機制，主動與整集方案團隊及涉及的第三方廠家就交付風(fēng)險進行有效聯(lián)調(diào)和深度質(zhì)量加固，實現(xiàn)存儲交付質(zhì)量領(lǐng)先；八大區(qū)同步高質(zhì)高效推進交付，實現(xiàn)華為存儲率先打通First Call，存儲交付能力領(lǐng)先。

5GC并非華為與中國移動交付的第一個網(wǎng)絡(luò)云項目。作為率先大規(guī)模進入中國移動核心業(yè)務(wù)的分布式存儲提供商，華為在中國移動網(wǎng)絡(luò)云項目一期項目中已成功交付2000存儲節(jié)點，支撐4G業(yè)務(wù)穩(wěn)定運行。有了一期的成功經(jīng)驗，在二期3500節(jié)點更大的交付規(guī)模面前，華為和移動集團已胸有成竹，在雙方的密切配合與協(xié)調(diào)下，項目按交付里程碑順利交付，并于9月實現(xiàn)商用，助力5G業(yè)務(wù)規(guī)模上線。

打造最佳數(shù)據(jù)底座，成為5G網(wǎng)絡(luò)的安心之選

5GC方案以華為OceanStor海量存儲為底座，一類存儲資源基于SAS HDD主存構(gòu)建，二類存儲池基于SAS HDD結(jié)合SATA HDD主存構(gòu)建，為華為NFV云平臺和第三方云平臺提供高效、可靠、可管可控的存儲服務(wù)。

圖2：華為NFVi網(wǎng)絡(luò)云方案示意

性能方面，華為OceanStor海量存儲獨有的FlashLink®性能加速技術(shù)，通過智能分條聚合、I/O優(yōu)先級智能調(diào)度、智能Cache算法、智能數(shù)據(jù)識別與處理等系列關(guān)鍵技術(shù)，結(jié)合NVMe SSD緩存加速，實現(xiàn)超低穩(wěn)定時延，滿足5GC核心業(yè)務(wù)訴求。

在可靠性方面，華為OceanStor海量存儲支持端到端數(shù)據(jù)完整性校驗（Data Integrity Field，簡稱DIF）、全面的系統(tǒng)亞健康檢測與自愈、唯一跨集群分布式雙活、異步復(fù)制等I/O級、系統(tǒng)級、數(shù)據(jù)中心級端到端可靠性保障技術(shù)，機柜級冗余方案可保證整機柜失效時仍能保障業(yè)務(wù)連續(xù)。同時，存儲可結(jié)合應(yīng)用部署容災(zāi)方案，支持兩兩城市之間實現(xiàn)實時容災(zāi)，保障24/7業(yè)務(wù)在線。

在TCO優(yōu)化方面，本次部署OceanStor海量存儲支持從三節(jié)點快速彈性擴展至數(shù)千節(jié)點，優(yōu)化當(dāng)期投資。同時，彈性糾刪碼數(shù)據(jù)冗余機制規(guī)模應(yīng)用于本項目（Erasure Coding，簡稱EC），相較傳統(tǒng)三副本方式提升存儲空間利用率，進一步助力降本增效。值得一提的是，本次項目采用可得容量方式采購、部署，實現(xiàn)所買即所得，免去了前期多地、多池涉及的復(fù)雜容量規(guī)劃，最大程度縮減了項目交付周期成本。

小結(jié)

中國移動5GC項目成功完成3500節(jié)點超大規(guī)模分布式存儲部署，項目已按期全部交付商用并持續(xù)穩(wěn)定運行，再一次實證了華為OceanStor海量存儲全面領(lǐng)先的產(chǎn)品能力和超大規(guī)模工程交付能力。在未來，華為OceanStor海量存儲將繼續(xù)致力于為包括電信運營商在內(nèi)的各行業(yè)用戶提供更具場景化競爭力的產(chǎn)品與服務(wù)，打造海量數(shù)據(jù)安心選，助力千行百業(yè)數(shù)字化轉(zhuǎn)型與業(yè)務(wù)創(chuàng)新。