基于DPDK流量动态负载均衡方法.docVIP

基于DPDK流量动态负载均衡方法 　　摘要： 随着互联网技术的不断发展，数据中心网络以及国家骨干网络的流量规模也在不断增长，大规模的流量以及无用的恶意流量对多核处理器的负载均衡有着很大的影响，所以对于多核处理器来说，负载均衡是一个亟待解决的问题。本文提出了一种基于DPDK平台的动态多重Hash的技术来更好地解决在多核处理器中流量分配不均衡的问题。文章中对现有的RSS等相关技术进行分析，通过采用对称RSS技术与动态负载相关技术相结合的方法，将捕获的数据包发配到不同的收包队列，实现处理器多核间的负载均衡。 　　关键词： DPDK； 负载均衡； 多核处理 　　中图分类号：TP393 　　文献标志码：A 　　文章编号：2095-2163（2017）04-0085-06 　　0引言 　　随着互联网技术的不断发展，网络中的流量规模日益增大，传输速度也在不断提高，流量的负载均衡问题成为了限制诸多网络服务的瓶颈，为了应对网络中数据包的高速传输，Intel针对X86架构设计了高性能的数据包处理框架DPDK，DPDK通过对大页技术、零拷贝技术、 网卡队列技术以及CPU的亲和性等成熟技术的开发运用，以及对数据包处理的过程引入了效能优化，相比Linux系统的数据包处理性能提高了数倍。DPDK框架主要应用在多核处理器系统对数据包的处理流程中，在多核处理器的负载均衡方面，传统的负载均衡算法主要有轮询、哈希散列、响应速度等，DPDK框架在负载均衡上采用了RSS技术，但是单纯地采用RSS技术对于高性能会话连接的处理以及特殊情况出现Hash碰撞这些问题在技术探讨中却仍然呈现出一定的缺陷与不足。基于此，本文即研究提出了一种基于DPDK平台的动态多重Hash的技术，通过对原有的RSS进行修改以及结合动态调整的方法来更好地解决在多核处理器中流量分配不均衡的问题。 　　1相关工作 　　1.1RSS技术 　　RSS（Receive Side Scaling）是与底层硬件相关联，在多核处理器收到数据报文后能够在多核之间进行高速转发的网卡驱动技术。该技术需要通过相关的硬件网卡支持展开哈希值的计算，根据哈希值的不同将收到的数据报文发送到不同的收发队列当中，由于CPU的亲核性，Linux内核将不同队列的报文映射到不同的处理器核中。同时，考虑到DPDK支持网卡的多队列功能，因而可以比较容易地给特定应用指定接收（RX）或发送（TX）队列。 　　[JP2]通俗地讲，RSS是利用特定的报文字段值进行哈希计算得出哈希值，再通过得出的哈希值将数据报文送往不同的队列，网卡会根据数据包的不同类型确定其特定的字段信息，如表1所示。例如IPV4 TCP的特定字段是由（S-IP、D-IP、S-Port、D-port）四元组构成，此外，DPDK还可以根据需要采用数据包中的其他特定字段满足不同的需求。并且图1还进一步阐释了通过Hash计算得到的哈希值与队列索引之间的关系。 　　1.2对称RSS技术 　　对称RSS是指在网卡驱动开启RSS功能后相同连接的双向数据报文能够分配到多核处理器的同一个核中，因为在不同核中共享连接信息会产生死锁的现象，即使得对称RSS对于保存连接信息的网络应用在减少性能开销上获得了大幅提升。 　　[JP2]RSS采用的是Toeplitz Hash算法，此算法需要2??输入变量：数据报文中的五元组信息以及默认的Hash key。DPDK网卡驱动层采用的Hash key是Microsoft推荐的，对于相同连接的双向数据报文经过哈希后得到的Hash值是不同的，Hash值的不同会出现2个方向的数据报文分配到不同的接收队列，通过不同的处理器核心进行处理。对于如何生成对称的RSS，文献[1]对RSS原有的Hash key融入了一定的修改，并证明这组Hash key可以用来实现对称RSS。原有的Hash key以及论文中提到的Hash key值分别如图2和图3所示。 　　1.3技术分析 　　研究分析可得，RSS技术的缺点是一些网络应用处理的设备中，仅仅使用RSS技术会影响处理性能，例如电信转发设备，对一个网络连接的双向流处理的方式是相近的，所以希望在多核处理器的同一个核上对存在对称信息的数据报文进行处理，比较有代表性的应用有网络防火墙、服务质量保证。若在不同的核上处理同一个流上的双向信息，就会出现不同核研发设定数据同步的问题，这就会产生处理器的多余开销，降低处理器的性能。 　　相对DPDK平台的RSS技术改进的对称RSS技术虽然解决了同一个流的对向数据报文在不同核上有效处理的问题，但是对于出现Hash碰撞的情况以及大规模相同连接的流量时，还是会出现多核处理器某一个核上的负载过重，甚或负载不均衡的情况。 　　[JP2]综上可得，当网络流量出现比较单一极端的情况