3500节点！中国移动联合华为成功交付超大规模分布式存储集群

导语：2020年9月，中国移动集团网络云5GC（5G核心网络云）项目全面上线商用，继续领衔5G基础设施建设。华为以高质量和效率交付超过3500节点大规模OceanStor海量存储，通过领先的产品能力和大规模工程交付经验，助力中国移动5GC项目按期上线。

5G战略加速，5GC核心网络云建设成为关键

继2019年全球几十家Top电信运营商纷纷宣布5G商用之后，5G基础设施建设在全球范围内如火如荼地展开。在国内，中国移动、中国电信和中国联通三大运营商于2019年11月1日正式上线了5G商用套餐，标志着国内正式迈入5G时代。截止今年6月，中国移动已在全国范围部署14万个5G基站，成为5G商用的先行者，并表示将进一步加快网络建设，确保年内累计建成30万个5G基站目标，实现在全国所有地级以上城市提供5G商用服务。

为了打造适应5G业务特点的基础设施平台，提供更好的5G服务，中国移动全面启动了面向5GC网络云建设。通过包含网络、存储、计算等在内的5G基础设施云化建设，在保障为最终用户提供高质量通信及数据服务的同时，降低运营成本，提高管理、维护及业务部署效率，降低整体能耗，并为未来创新业务的快速上线提供准备。

作为核心业务系统，5GC项目对存储系统的功能、性能、可靠性、易用性的要求极为严苛。通过长达半年的选型测试与招标，最终华为以第一份额中标。

更严苛的交付要求，只为更好的5G体验

本次5GC网络云专为移动5GC网元部署而建设，是中国移动5G SA网络建设的关键一步，建成后将运行多种类型的5G业务：

➢ 一类是核心业务网元数据流量，承载前端5G基础语音、数据、消息等类别的关键业务；

➢ 二类是网管数据流量，在全国包含华北、东北、华中、东南、华南、西南、西北等在内“八大城市”网络布局，均需满足毫秒级稳定低时延响应、多区域实时容灾、海量弹性扩展、全区域可管可控等电信级交付要求。

以上两种类型的业务，分别采用两类独立的存储资源池来承载。如何按时、按质完成项目交付，并保证5G网络的用户体验，才是对中国移动与华为的产品能力、交付能力的关键考验。整体项目交付面临如下三大挑战：

➢ 交付工期紧张：项目交付于3月启动硬件集成，4月完成软件集成（包含存储、交换、虚拟化平台、网元、PaaS和O+等），需要在6月完成验收打通First Call，9月全业务完成上线、平台商用。存储作为最底层基础设施，需要给其他上层网元、应用部署预留充足的时间，是真正的时间紧、任务重。

➢ 交付工作量大：需交付超过3500个分布式存储节点，累计配置条目万级，涉及大量方案设计、参数配置、环境检查、深度巡检等工作，由于还需与第三方平台对接，涉及大量设计、沟通对接工作。

➢ 交付质量要求高：存储作为业务平台的关键支撑，一旦部署完成后再进行修改，必然牵一发而动全身。因此要求一次性交付成功，不允许交付后进行包括配置参数在内的任何修改。

图1：中国移动5GC项目交付里程碑

实际交付中，华为以专业的工程化交付运作机制保障了项目的高质量、高效率交付。提前梳理风险、制定模板化交付手册、并行运作等机制，保障问题处理零等待，体现了三个专业性领先：针对海量设备交付进度风险，提前规划专有存储集群配置工具，缩短集群部署时间90%，实现存储交付进度领先；建立完善的沟通机制，主动与整集方案团队及涉及的第三方厂家就交付风险进行有效联调和深度质量加固，实现存储交付质量领先；八大区同步高质高效推进交付，实现华为存储率先打通First Call，存储交付能力领先。

5GC并非华为与中国移动交付的第一个网络云项目。作为率先大规模进入中国移动核心业务的分布式存储提供商，华为在中国移动网络云项目一期项目中已成功交付2000存储节点，支撑4G业务稳定运行。有了一期的成功经验，在二期3500节点更大的交付规模面前，华为和移动集团已胸有成竹，在双方的密切配合与协调下，项目按交付里程碑顺利交付，并于9月实现商用，助力5G业务规模上线。

打造最佳数据底座，成为5G网络的安心之选

5GC方案以华为OceanStor海量存储为底座，一类存储资源基于SAS HDD主存构建，二类存储池基于SAS HDD结合SATA HDD主存构建，为华为NFV云平台和第三方云平台提供高效、可靠、可管可控的存储服务。

图2：华为NFVi网络云方案示意

性能方面，华为OceanStor海量存储独有的FlashLink®性能加速技术，通过智能分条聚合、I/O优先级智能调度、智能Cache算法、智能数据识别与处理等系列关键技术，结合NVMe SSD缓存加速，实现超低稳定时延，满足5GC核心业务诉求。

在可靠性方面，华为OceanStor海量存储支持端到端数据完整性校验（Data Integrity Field，简称DIF）、全面的系统亚健康检测与自愈、唯一跨集群分布式双活、异步复制等I/O级、系统级、数据中心级端到端可靠性保障技术，机柜级冗余方案可保证整机柜失效时仍能保障业务连续。同时，存储可结合应用部署容灾方案，支持两两城市之间实现实时容灾，保障24/7业务在线。

在TCO优化方面，本次部署OceanStor海量存储支持从三节点快速弹性扩展至数千节点，优化当期投资。同时，弹性纠删码数据冗余机制规模应用于本项目（Erasure Coding，简称EC），相较传统三副本方式提升存储空间利用率，进一步助力降本增效。值得一提的是，本次项目采用可得容量方式采购、部署，实现所买即所得，免去了前期多地、多池涉及的复杂容量规划，最大程度缩减了项目交付周期成本。

小结

中国移动5GC项目成功完成3500节点超大规模分布式存储部署，项目已按期全部交付商用并持续稳定运行，再一次实证了华为OceanStor海量存储全面领先的产品能力和超大规模工程交付能力。在未来，华为OceanStor海量存储将继续致力于为包括电信运营商在内的各行业用户提供更具场景化竞争力的产品与服务，打造海量数据安心选，助力千行百业数字化转型与业务创新。