第10讲 InfiniBand技术及存储网络.ppt

第十讲 InfiniBand技术与存储网络 InfiniBand产生的背景 PCI技术规格简介 替代PCI的InfiniBand 1．串行传输 2．传输率 集群 集群的优点 集群的存储能力与I/O性能 集群处理 InfiniBand特性 Infiniband,iSCSI和FC协议的比较 存储协议/环境适应性 结 论 PCI替代结构 InfiniBand最主要的配置就是替代PCI总线到SAN的连接。在图13-21所示的网络中，HCA为与主机系统中，光纤通道TCA与主机系统相邻。 InfiniBand模型层次 InfiniBand体系结构采用多个层次，每层独立操作。它包括物理层，链路层，网络层，传输层和上层。见图1所示： 本地 IBA 操作 SAR 网络 链路编码 MAC 上层 传输层 网络层 链路层 物理层 事务 消息（QP） 子网间路由（IPV6） 网内路由（LID） 流量控制 报文 中继 MAC 远程 IBA 操作 SAR 网络 链路编码 MAC 报文中继 链路 MAC 终端节点 交换机 路由器 终端节点 图1 InfiniBand 的层次 物理层： InfiniBand规范的物理层定义了电器和机械特性，包括光纤和铜介质的电缆和插孔、底板接头、热交换特性等。 InfiniBand采用全双工串行传输,单线传输速率为2.5Gb/s,。InfiniBand定义了物理层的三种链路速度，1X、4X或12X线并行来扩展信道，具有较高的容错性和抗毁性。 链路层: 链路层和传输层是InfiniBand结构的核心。链路层定义了报文格式、点到点链路操作，以及本地子网内的交换。 在链路层中有两种报文：管理报文和数据报文。管理报文用于链路配置和维护，提供的控制操作包括：设备枚举、子网指示和容错。数据报文用于传输信息，最大传输负载为4k。 链路层还允许使用虚信道（VL），VL是独立的逻辑链路，它们共享一条物理链路。每条物理链路可以支持15条标准VL和一条管理信道VL15。VL15具有最高优先级，VL0的优先级最低。管理报文独占使用VL15。虚信道可以同时容纳多个通信进程的并发，即一个端节电可以同时与几个不同的端点通信并传输不同的内容，而不会发生连接阻塞。 为了确保可靠性和性能， InfiniBand提供基于预约的流量控制管理例程和两阶段的数据完整检查。 网络层： InfiniBand网络层提供报文在子网间的路由，在子网内部传输时不需要网络层。每个路由报文使用全局路由首部（GRH）和一个128位IPV6地址表示源和目的节点地址。网络层还为子网中每个设备赋予64位唯一全局标志（GUID），报文通过路由器时，就是基于该标志在子网间传输。当只在一个子网中传输时， InfiniBand不需要网络层信息和头开销。 传输层： InfiniBand体系结构的最后一层负责实际报文的传输。传输层控制的几个重要方面，包括报文发送、通道多路复用和基本传输服务。 InfiniBand有一项重要的改进，那就是使用硬件机制完成了传输层的所有功能。传输层还负责处理发送时数据分段，接收时重组。 InfiniBand规定了多种传输服务用于提高数据可靠性，可以支持各种高层协议，如IP和SCSI，定义了实现管理功能所需要的信息和消息和协议。这些管理协议分为子网管理和子网服务。 InfiniBand采用了当今的先进技术，其优越的性能。归纳如下： 聚集带宽 InfiniBand交换方式提供了专用的无冲突的节点间通信，支持多条并发连接。当加入节点时，交换结构可以增加带宽。 分布式系统的通用互联 InfiniBand可以构造全局公用的互联结构，用于在任何构造模块间进行通信，必要时管理员可以加入专用构造模块。各种设备可以使用同一链路连接，这样管理员可以通过多种方式增加分布式系统和共享资源。 内建安全机制 InfiniBand管理结构基于安全密钥，它定义了改变结构或重新编程所需的授权。可以指定系统管理员只操作特定的子网，需要授权才能访问的设备。 低软件管理开销 InfiniBand规范采用VIA(Virtual Interface Architecture)瘦传输层中队列通信模型和机制，消除了并行应用程序集群中server间的通信开销。 错误隔离 InfiniBand点到点体系结构可以隔离交换结构的故障区。某一连接中的错误可以标志出来，而不会影响其它I/O设备。 QoS 在InfiniBand中，HCA和TCA之间的QoS定义了基于虚链路的队列和带宽，可提供更好的一些服务。 RAS优点 在可靠性方面，Inf