【ODCC】2023基于OTN传输网的任务式数据搬移技术白皮书
前言
随着新技术革命和产业变革,行业数字化升级进入深水区,数据量和跨域快速搬运需求呈爆炸式增长。现有网络采取的静态预部署方式难以满足周期性突发海量数据绿色高效传输需求。这不仅制约了海量数据在行业中的深度应用,也难以支持数据中台能力孵化、科研与数据密集型业务的需求。为皮胚数据高速增长,我国政府企业等各组织单位陆续开展各级网络建设。其中最典型的 2022 年全面启动的“东数西算”工程。这是我国首次从战略层面对算力网络提出的顶层规划蓝图,是我国数字经济高质量发展的必然要求。东数西算战略要求数据能够按其所归属的业务特点能够灵活流动。相应的承载网络也应该具备灵活调度能力,打破传统静态组网方式.提升网络资源利用率,全面支撑国家战略落地。
中国移动积极响应国家号召,并针对中国移动 IT 云数据中心节点间 TB/PB 级海量数据快速搬运导致的网络峰值带宽诉求高、闲时带宽利用率低现状,通过构建大数据调度平台、算网编排中心 (含OTN 网络调度 )、传输网网管、云管平台、NCE-T 等编排调度子系统协同架构,提供“业务编排、削峰填谷,降低链路峰值带宽需求”“无同步任务时,物理链路动态拆除”和“按需动态调整链路带宽”功能,具备对数据中心间互联的物理网络资源实施任务式带宽调整与连接动态拆建能力,实现一份物理资源多局向错峰使用、降低峰值时段带宽资源诉求、提高物理网络资源利用效率的目标。
本技术创新可以为科研、传媒等行业存在的任务式跨域海量数据快递需求提供优质可靠的解决方案,预期效果显著,而且支持高扩展性、高集成性以及标准化的技术和管理体系,支持 IT 服务与政企行业商业推广。
背景
中国移动 IT云网络现状及局限性
现有资源池间互联网络采用长周期静态连接专线方式,其烟囱式资源配置与管理机制缺乏灵活性,因 IT 云应用周期性、间歇性特征和云池间流量的峰谷效应,导致编排器的资源分配方式越来越复杂、资源分配效率持续降低。如图 1所示为现网资源池间互联链路流量统计数据,各资源池入口链路峰均比都比较高,如图 2 所示为H1 池流量峰值比达到 7.2,这意味着空闲时段网络轻载严重,物理链路资源严重浪费。
但 IT 云网络规模的不断增大,资源池间每天、每周、每月都会产生巨量运营数据,这些海量数据需要周期性、间歇性的集中迁移到集团级 IT 云资源池进行集中数据处理,导致峰值时段对网络资源诉求较高,而低估时段配置的网络资源存在较大比例的闲置,形成云池之间的网络资源存在“高”峰均比现象,导致网络资源平均利用效率较低,迫切需要一个创新方案来解决忙时峰值带宽高、闲时资源利用率低的困局。