高性能计算机I／O技术PCIExpress分析.pdfVIP

维普资讯 第3O卷 第12期 计 算 机 工 程 2004年6月 正 № l2 ComputerEngineering June2004 · 发展趋势／热点技术 · 文章编号：1000--3428(2004)12 o0岳__02 文献标识码：A 中圈分类号：TP336 高性能计算机I／O技术PCIExpress分析 徐君明，裴先登，王海卫，黄 浩 (华中科技大学外存储系统国家专业实验室，武汉430074) 攮 羹：分析了PCIP／CI．x架构I／O瓶颈，然后深入阐述第三代1O／技术PCIExpress的特性及其体系结构 ，最后指出PCIExpress作为InfiniBand 的重要补充必将在未来计算机1O／体系结构中扮演举足轻重的角色。 关■词：PCIExpress；PCI／PCI．x；高性能计算机I，O；InfiniBand；总线技术 Analysis0fHighPerformanceComputerI／O TechnologyPCIExpress XU Junming，PetXiandeng。W ANG Haiwei-HUANG Hao (NationalStorageSystem Lab．HuazhongUniversityofSci． Tech．．Wuhan430074) lAbstractlThispaperfirstlyanalysesthebottleneckofPCIP／CI—XinComputerllO architecture、andthenexpatiatesOilthecharacteristicand rachitectureofthirdgenerationI／0technology，PCIExpress；finally，pointsoutthatthePCIExpressasanimportantcompIementarjIyofInfiniBand? wilI callintofullplayinfuturecomputerI／Oarchitecture． [Keywords】PCIExpress；PCI／PCI—X；HighperformancecomputerI／0；InfiniBand；Bustechnology 1概述 2．1PCI架构的先天缺陷 所谓计算机总线，就是连接计算机各个功能部件的公共 PCI—XI33的带宽只有I．066GB／s，虽然PCI—SIG最新公布 通道。计算机总线的技术特性，决定了计算机I10处理能 的PCI．X266、PCI—X533的带宽峰值分别可达2，I28GB／s和 力，进而决定了计算机的整体性能以及应用环境。自lntel公 4．264GB／s，但是这没有从根本上(可以说也不可能)缓解服务 司I991年提出PCI(PerpheralComponentInterconnet)技术 以 器端的I0／带宽瓶颈 。PCI架构本身固有缺陷决定了这种 来，这项局部总线技术已维持了十多年。 状况。PC1架构的总线固有缺陷主要包括以下几点： 从体系结构上讲，计算机总线可以分为系统内存总线和 (】)箱内可扩展性很差且不支持箱外扩展：PCI的扩展主 主机I／0总线。前者是中央处理器CPU、高速缓存Cache以及 要通过两种方式来实现，要么通过增加同层PCI总线(pcl本 主存的公共通道，而后者则是速度相对较慢的各种IO／设备 身就是一种层次结构IO／技术)，要么通过增加PCI—to—PCI 的公共通道。系统内存总线与主机I／O总线通过某种