数据中心交换机buffer需求分析白皮书.docxVIP

实用文档

数据中心交换机buffer需求分析白皮书

目 录

引言 3

DC的网络性能要求 3

国内OTT厂商对设备Buffer的困惑 4

白皮书的目标 4

Buffer需求的经典理论 5

1BDP理论 5

NickMckeown理论 6

经典理论的适用性 6

基于尾丢弃的buffer需求 9

丢包的影响 9

丢包对带宽利用率的影响 9

丢包对FCT的影响 12

大buffer的作用 13

吸收突发，减少丢包，保护吞吐 13

带宽分配均匀 14

优化FCT 15

DC内哪需要大buffer 15

需要多大buffer 17

带宽升级后，buffer需求的变化 19

3.6小结 19

基于ECN的buffer需求 21

ECN的作用 21

ECN水线设置 23

基于ECN的buffer需要多大 24

基于大小流区分调度的buffer需求 27

大小流差异化调度 27

大小流差异化调度如何实现大buffer相当甚至更优的性能 27

基于大小流差异化调度的buffer需要多大 28

6总结 28

7缩略语 29

1引言

DC的网络性能要求

近几年，大数据、云计算、社交网络、物联网等应用和服务高速发展，DC已经成为承

载这些服务的重要基础设施。

随着信息化水平的提高，移动互联网产业快速发展，尤其是视频、网络直播、游戏等行业的爆发式增长，用户对访问体验提出了更高的要求；云计算技术的广泛应用带动数据存储规模、计算能力以及网络流量的大幅增加；此外，物联网、智慧城市以及人工智能的发展也都对DC提出了更多的诉求。

为了满足不断增长的网络需求，DC内的网络性能要求主要体现在：

低时延。随着深度学习、分布式计算等技术的兴起和发展，人工智能、高性能计算等时延敏感型业务增长迅速。计算机硬件的快速发展，使得这些应用的瓶颈已经逐渐由计算能力转移到网络，低时延已经成为影响集群计算性能的关键指标。因此，时延敏感型应用对DC网络时延提出了更高的要求。目前DC内，端到端5-10微秒时延已经成为主流的目标要求。

高带宽高吞吐。数据时代的到来，产生了海量的数据，如图1-1。基于数据的应用

（如图像识别）的推广，使得网络数据呈爆发式增长，小带宽已经无法满足应用对传输速率的需求。部分应用场景下，带宽成为制约用户体验的瓶颈。高带宽高吞吐对于提升大数据量传输的应用性能有着至关重要的影响。为了应对大数据量传输的

应用需求，目前，百度、腾讯、阿里巴巴等互联网企业的DC都已经全面部署100GE

网络，阿里巴巴更是规划2020年部署400GE网络。图1-1数据中心内存储的实际数据

数据来源：中国IDC圈

极低丢包率。丢包需要重传，甚至RTO超时，造成带宽的浪费。目前，不少

DC，通过使能PFC（Priority-basedFlowControl）实现无损网络。

国内OTT厂商对设备Buffer的困惑

为了满足应用的发展对DC网络性能提出的更高要求，国内OTT厂商除了上层的应用优化外，希望对DC网络架构以及交换设备做进一步的优化，以提升网络整体性能。DC内的设备buffer成为关注的重点。

经过与国内OTT厂商交流后发现，OTT厂商对设备buffer存在两点主要困惑：

设备buffer需要多大。设备buffer大小一直备受关注。大buffer能吸收突发，减少丢包，但同时也会带来排队时延的增加；小buffer能保证排队时延较低，但却无法吸收突发，影响链路的带宽利用率。OTT厂商都迫切想知道，在目标场景下，多大buffer的设备能满足业务需求。

使能ECN后，ECN的水线该设多大。ECN使设备能尽早的反馈拥塞信息，避免排队时延过长，同时减少丢包，但是ECN的水线设置对网络性能影响较大。如果水线过低，则链路会欠吞吐；水线过高，则会造成时延增加，同时无法体现ECN尽早反馈拥塞的优势。因此，OTT厂商迫切需要ECN水线设置的经验指导。

白皮书的目标

在本白皮书中，我们梳理了目前业界关于DC交换机buffer的观点和结论，结合本身对buffer的认识理解，通过理论和仿真分析，试图回答关于设备buffer的两个基本问题：设备buffer需要多大以及ECN水线该设多大。

考虑到，目前DC现网中的主流场景包括：基于尾丢弃的TCP拥塞控制网络，基于ECN的TCP拥塞控制网络