数据中心网络和布线方式（康普）20110311v2.docxVIP

数据中心的网络架构和对布线的影响 一、前言 数据中心布线架构基于网络架构，但又有其相对独立性。布线架构既为了支撑网络架构，同时又为用户提供管理便利、灵活可调整、模块化易扩展。毕竟在配线架上进行维护操作，可靠性、灵活性、方便性是远远好于直接到设备端口上进行操作。目前常见的数据中心网络布线架构，主要有三种包括：直连式（direct-connect）,区域分布式（zone-distribution）和置顶式ToR（top-of-rack）。以上不同架构主要取决于服务器的种类和大小，并考虑业务和操作等方面，每个架构均有各自的优势和劣势，适用不同的需求。 二、三种架构介绍 下文，将对这些架构进行介绍和对比，进而使读者有一定程度的认知和了解。同时，本文也将对目前新出现的架构作简要介绍。 2.1 区域分布式（zone-distribution） 区域式布线架构是结构化布线，是TIA-942数据中心标准中所推荐的架构，这种架构的特点是：模块化，灵活，在电缆数量成本、管理性、有源设备利用率之间性价比最佳的选择，适合于中大型数据中心，具有通用布线架构适应不同网络架构。图1所示为区域分布式的架构。 图1：区域分布式物理及逻辑架构 区域分布式架构分为主要有三种： 端列头交换(End-of-Row/EoR Switching)：列头柜在每列机柜的两端的方式。 中间列头交换(Middle-of-Row/MoR Switching)：列头柜在每列机柜的中间位置。 独立网络机柜或机架（Standalone network cabinets or racks/Network POD)：在区域中设置独立的区域放置布线和网络设备。 下面分别介绍如下。 2.1.1 EoR（End-of-Row） EoR是最常用的方法。在列头柜中用一个核心/汇聚交换机，例如Cisco 6500/4500系列去支持一个或更多机架。因为网口集中，这种方法通常能有较高的性价比。这种方法同时也是最不需要考虑服务器特性的，因此它提供最大的灵活性能同时支持不同的服务器。在某些情况下，EoR更能提高性能的优势，因为需要交换大量信息的的两台服务器可以放在同一张交换机板卡上，相对于交换机的板卡到板卡，或者是交换机到交换机的交换方式，会比较快。EoR的主要缺点是需要大量的跳线连到交换机。布线的成本会提高，大量的数据线也会降低冷却的通风量。 2.1.2 MoR（Middle-of-Row） MoR是跟EoR是一样的，在图2所示，可以看出，区别只是摆放头柜的位置。EoR是把设备头柜分到两边，而MoR是把设备头柜放在中间。一般来说MoR对布线的跳线和管理较EoR好，因为跳线是分向两侧管理的。如图2所示为EoR和MoR架构。 图2：EoR和MoR的架构 2.1.3 Network POD POD简单理解就是区域布线，类似于TIA-942的ZDA区域布线区的概念。对于大型的机房，或者区域机房，选择其中的一列或者独立的几个机柜或机架作为区域的配线管理区。如图3所示为POD架构。 图3：POD示意[3] POD布线方式也是目前比较流行的方式。从目前的规划一般8~10台机柜两边要增加走道，所以单列设置列头柜不一定是最佳的选择，而考虑在几列或者功能区中集中选择一些机柜/机架作为配线区，增加管理维护的便利性。 2.2 直连式（direct-connect） 直连式即所有的服务器直接连接到主配线区MDA或头柜HAD，中间不经过配线架转接。图4所示为直连分布式的架构。 图4：直连式物理及逻辑架构 对于小型和中型规模的数据中心，管理的设备量和线缆量都不十分巨大，直连式不失为一个很好的选择。另外，对于SAN网络布线来讲，由于存储设备线缆连接后，一般很少变化，也可以考虑采用直连方式架构。 2.3 置顶式ToR（top-of-rack） ToR也是常用的架构，是将1RU高的接入层交换机放在机架顶，而机架上的所有服务器直接连接到交换机。ToR架构通常在当部署密集的服务器环境下，例如集群环境、负载均衡应用、Web搜索引擎或虚拟化应用，这种情况下每个服务器需要多个网络连接，如图5所示为ToR架构。 图5：置顶式物理及逻辑架构 ToR的优点是可以在单个机柜中实现共享不同服务器的处理器，用体积较少的光缆连到汇聚层，铜缆主要是集中在机架里。缺点是可能没有足够的服务器端口连接到交换机的端口，造成设备的浪费。同时，由于上联光纤较少，一旦将来改变结构或是提升网络设备速度时，会产生问题。另外，在三级或四级数据中心内，交换机是需要左右备份的，不但增加冗余接入层交换机造成成本成倍上涨，同时互联布线也会令到每一个机架都需要个别的管理，跳线添加、移动、变更管理上很复杂，不如EoR可以集中管理的方式简单、方便。 三、三种在数据中心网络布线架构对比 下面就区域、直连