券商集中交易系统小型机升级和选型实践.docx

? ? ? ? ? ? ? 券商集中交易系统小型机升级和选型实践 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?  【摘要】本文描述了某券商集中交易系统浪潮 K1 Power 小型机升级过程的前前后后，从机器选型到压力测试，直至升级完成。重点分享了机器选型的过程以及选型考虑的因素。还分享了上线过程中遇到的一些实际问题。 一、集中交易系统概述 券商的交易系统很多，最核心的系统就是集中交易系统，又叫订单系统。有的券商将订单系统和清算系统进行分离。我们公司的集中交易系统是订单和清算合在一起的。除了在集中交易系统产生的订单，还有一些子系统也会产生订单，在清算时通过数据上下场，同步到集中交易系统，然后一起做清算。 所以集中交易系统对性能和可用性要求有两个最重要的时段，一个是白天的交易时间，一个是晚上的清算时间。在其它时间一般都是有维护窗口的。 二、升级到?Power9 的背景 公司原来使用的服务器是IBM Power系统小型机，关键服务器是P780，辅助服务器是P750和S824等低端机器。Power7系列服务器是2014年上线的，Power8系列是2015年上线的，在上线时同时购买了五年的维保服务。 首先P780的单机处理能力，出现性能瓶颈，已经不能满足业务需要。在2019年CPU的最高使用率曾经达到过70%，为了减轻主机压力，我们已经做了分布式的部署，将部分查询，登录的业务分到其它的机器上。 其次，由于机器已经购买了五年，厂家已经停止生产该机型，购买硬件维保成本较高，简单的比较一台32C P780的五年维保价格，就已经超过一台32C E980服务器的新购买价格。如果换算成机器的处理能力，那么这个价差会更大。当然价格的事情由于弹性很大，不是很有说服力，这里权当做为一个参考。 再次，我们使用的数据库软件DB2 10.1已经EOS（End of Service），现在的aix操作系统版本按照计划也会在2022年EOS，从长远考虑，都需要进行升级。 在这个背景下，我们启动了小型机升级计划。 三、服务器选型考虑 服务器选型我们考虑的最重要因素是单机的处理能力，响应时间，系统可靠性以及与应用的匹配度。 1、服务器型号的选择 目前 K1 Power 系统服务器是由浪潮商用机器有限公司生产的，主要型号有浪潮K1 Power E980，E950，S924，S922，S914几种型号。根据厂家的介绍，E980专为支持最重要的关键应用而设计，是最强大、可靠、安全且可扩展的Power9服务器。E950专为动态的企业计算需求而设计，紧凑的4路系统可提供卓越的性能、极高的敏捷性和业界领先的可靠性。S924 面向关键应用数据的适应未来需求的4U2路服务器基础设备，为关键应用负载提供行业领先的性价比优势。 根据我们的业务特点，重点考察浪潮K1 Power E980和浪潮K1 Power E950这两种机型。从测试结果看，这两种机型都能满足我们的需要。我个人觉得E980的优势在于扩展性，可以从单柜，最多扩展到4个柜，CPU数量最多可以是E950的4倍。在选用多柜服务器的时候，一定要对应用进行压力测试，确保增加CPU数量可以提高性能。最终我们选择了E980 44C为主服务器，E950 44C做为高可用服务器，S924 20C做为非关键应用设备和备机。 2、服务器CPU数量选择 POWER9 CPU 的内核数是可变的，有8核，10核，11核。以满配的E950为例，CPU数量可以是32,40,44。随着核数的增加，CPU主频会降低，参考图1。8核的CPU提供了最强的单核性能，11核的CPU提供了最大的吞吐量。从表格中可以看到随着核数增加，主频的范围会变大，实际运行的最高频率也会降低。我们根据测试结果，选择了11核的CPU，即单机44C。 图1 CPU核数与主频的关系 3、扩展柜的选择 我们在以前的服务器选型中，经常会选用扩展柜，这次经过对服务器的分析，发现利用服务器现有的插槽，就能满足要求。以E980为例，该服务器共有8个PCIE4插槽，一般配置2块HBA卡连接存储，2块万兆网卡，2块千兆网卡，就可以满足需要了，还有2个PCIE4插槽用于其他需求。 图2 E980插槽 4、启动盘的选择 浪潮 K1 Power 服务器支持使用NVME盘做为启动盘，图2中部的四个槽位就是NVME盘插槽，NVME盘做为服务器的启动盘属于首次采用，而且 NVME盘无法做RAID，与传统的启动盘有较大差异。我们最终选用了NVME盘做为启动盘，通过主机LVM来对磁盘进行高可用保护。使用NVME做为启动盘，也节约了PCIE4插槽。 5、板卡位置调整 从图3可以看出，每颗CPU对应着自己的槽位。我们对CPU进行了绑定，0、1号CPU绑定给数据库使用，2、3号CPU绑定给