高通量数据网架构与关键技术白皮书.docxVIP

高通量数据网 架构及关键技术白皮书 前 言 划。2022 年 2 月，国家全面启动了“东数西算”工程。2022 年 划。2022 年 2 月，国家全面启动了“东数西算”工程。2022 年 5 月，鹏城实验室推出中国算力网计划。2023 年 4 月，科技部发起成立国家超算互联网联合体。一系列的产业动作均旨在推动算力资源、业务和数据高效流动，助力算力网络发展。 算力网络与水网、电网的不同之处在于，算力网络运输的不是算力资源，而是把数据资源运输到算力资源节点。在算力大发展的背景下，需要运输的数据资源体量也在高速增长，根据 IDC 预测，到 2025年全球数据规模将突破 175ZB，如何实现海量数据的高效传输是算力网络需要解决的重要问题，亟待能够最大化提升网络有效传输能力的高通量解决方案。 本白皮书从网络承载、智能管控、端侧优化三个方面提出了高通 量网络的演进方向，提升网络的承载质量，增强管控层调度能力，优化端侧传输层软件平台，实现算力数据任务式调度、高效率传输，赋能东数西算，助力超智算业务发展。 联合编写单位：（排序不分先后） 中国联合网络通信有限公司研究院，下一代互联网宽带业务应用国家工程研究中心，中国联通数字科技有限公司，中国联通国际有限公司， 中国联合网络通信有限公司山东省分公司，中国联合网络通信有限公司广东省分公司 编写组成员：（排序不分先后） 曹畅，庞冉，刘莹，李建飞，何涛，王南，李壮志，翟锐，郑维通， 曾楚轩，杨振东，方遒铿，丁鼎，房秉毅，杜军，易昕昕，高星，佟恬，张帅，杨建军 目 录 背景 1 算存运三力协同助力数字经济蓬勃发展 1 算力时代海量数据迁移新需求 2 高通量数据网基本概念 6 高通量数据网架构 9 基础设施层 9 应用终端 10 承载网 10 算力中心 11 高通量协议层 11 高通量网络协议 11 高通量传输协议 11 高通量应用算法 12 高通量管控层 12 端侧管控 12 网侧管控 12 云侧管控 12 服务运营层 13 用户服务订阅 13 用户操作平台 13 云网信息资源库 13 高通量数据网关键技术 14 广域流量调度技术 14 SRv6 网络编程技术 14 流量识别与引流 16 广域拥塞感知与控制 16 智能管控技术 17 可用带宽资源实时感知 17 流量智能调度 18 传输协议优化技术 19 基于 TCP 的传输协议优化 19 其他传输协议的优化 20 数据智能压缩技术 21 数据压缩技术概述 21 压缩算法选择策略 22 数据传输安全保障技术 22 流量按需安全隔离 22 网络层安全防护 23 高通量数据网应用场景 24 东数西算业务 24 超智算海量数据传输 24 科技项目数据汇交 25 企业数据上云备份与灾备 25 总结与展望 27 缩略语列表 28 参考文献 30 背景 算存运三力协同助力数字经济蓬勃发展 《“十四五”数字经济发展规划》提出到 2025 年，数字经济迈向全面扩展期，数字经济核心产业增加值占 GDP 比重达到 10%[1]。加快新型基础设施建设，推动数字经济和实体经济融合发展，推进重点领域数字产业发展，是数字经济的重要组成部分。数字经济的飞速发展带来的海量数据需要先进的算力、存力和运力服务来发挥数据的高效价值，进一步助力数字经济发展。 根据国家互联网信息办公室《数字中国发展报告(2022 年)》统计显示，我国数据资源规模快速增长，2022 年数据产量达 8.1ZB，同比增长 22.7%，全 球占比达10.5%，位居世界第二[2]；截至2022 年底，我国数据存储量达724.5EB，同比增长 21.1%，全球占比达 14.4%[3]。 数字经济带来的海量数据需要先进的数据存力服务、算力服务和运力服务， 数据存得好、算力算得快、网络传得稳，数字基础设施才能充分发挥大数 据的要素价值[4][5]。海量数据是互联网世界的“石油”和“金矿”，也是算力时代最具价值的资源，其价值转化需要算力、存力和运力的一体化协同，实现大数据从“可用”走向“实用”。 为了满足千行百业数字化转型、数字技术与生活场景加速融合所带来的海量 存储和计算需求，国家提出东数西算工程，将数据中心选址在可再生能源丰富、气候适宜、绿色发展潜力大、综合能效优势明显的西部，把东部地区的非实时算 力需求以及大量生产生活数据输送到西部地区的数据中心进行存储、计算并反馈， 最大化实现数据中心产业绿色集约发展，推动资源统筹利用和西部数字经济建设 发展。“东数西存”、“东数西渲”、“东数西算”通过优化数据中心布局，实 现东西部存力、算力等资源供需关系的合理匹配，支撑千行百业的高质量发展[6]。 运力上联