云存储系统性能测试及结论的探讨.docVIP

云存储系统性能测试及结论的探讨 　　【摘要】云存储平台提供了海量的存储容量，可提供用户网盘、nfs、cifs、http接口等多种业务模式，但如何充分的发挥其系统性能，始终困扰着我们。本文通过测试云存储平台在各种业务场景、各种并发下的响应情况，探讨平台的优化和适合的及业务模式。 　　【关键词】云存储 loadrunner 压力测试 　　一、背景 　　云存储平台开展了多种业务，如用户网盘服务、基于nfs、cifs、http接口方式的共享存储服务等。 　　但是，由于用户场景需求、文件块大小、并发情况差异较大，造成服务器压力不均衡，或资源闲置，浪费处理能力，或无法满足需求，频繁报错等。 　　为了得到平台真实准确的处理能力，各种业务场景、各种并发情况下系统的响应情况，合理的分配系统资源，充分的发挥系统性能，同时检验系统是否能支持qq旋风等的业务，我们组织了相关的性能测试。 　　二、测试方案 　　（一）测试环境配置 　　测试使用云存储1套调度系统和资源组R9。测试单个资源组性能，可根据资源组性能线性扩展系数计算出多套资源组的整体性能。性能测试压力系统需要使用2根10GE光纤连接电信汇聚交换机，压力系统的交换机提供2个10GE光纤接口。 　　测试共使用共10台压力机，每台压力机有2个1Gbps的网口通过1GE网线与压力系统的交换机连接。压力交换机为cisco3750。压力机与云存储系统具备20GE的通信带宽。3750机通过2根10GE光纤与汇聚交换机nexus5000连接。 　　压力系统交换机所有网口和光口在同一个vlan中，其中两个光口做trunk，nexus5000交换机对应的两个光口同样也做绑定。 　　（二）测试对象及压力机配置 　　（1）云存储硬件情况. 　　（2）压力机基础配置. 　　（三）测试软件及工具 　　测试采用LoadRunner，该工具是业界使用最普遍的性能测试工具之一。它是一种预测系统行为和性能的工业标准级负载测试工具、也是一种适合多种体系架构和支持多种协议的自动负载测试工具。它通过模拟实际用户的操作行为和实行实时性能监测，来帮助使用者更快地查找和发现产品问题。缺点是该工具价格昂贵，并且测试带宽的功能较弱。 　　主要用该工具进行并发量测试。该工具的并发场景测试功能齐全、使用方便，是业界常用的测试工具。 　　（四）测试内容 　　测试策略。本次测试主要目的是通过测试不同大小的文件在不同并发、不同使用场景下（全读、全写、混合场景、网盘场景等）的性能值。 　　采用64KB文件模拟小文件场景，4MB文件模拟普通文件场景，100MB文件模拟大文件场景；并发压力采用1000、3000、6000递增测试。 　　网盘测试场景为模拟真实环境下用户的行为（30%list、50%读、20%写），因为网盘用户上传的文件大部分都是以小文件为主，所以选择的文件为60%64KB的文件，30%4MB的文件，10% 100MB。 　　本次测试主要关注每次请求的平均耗时、错误率、带宽。在错误率高于3%时记录主要错误日志。 　　测试用例设计。用例分为指标测试和场景测试两种类型。 　　指标测试关注系统并发能力和带宽。执行上传和下载操作的比例选择范围池是{（0：10），（1：9），（2：8），（3：7），（4：6），（5：5）， （6：4），（7：3），（8：2），（9：1），（10：0）}，分别为“全部执行下载操作”、“上传、下载操作数比例为1：9”、“上传、下载操作数比例为2：8”、…、“上传、下载操作数比例为9：1”、“全部执行上传操作”。系统会在不同的读写比例下表现出不同的性能。可适当选择一个或多个比例情况进行测试。 　　用例项说明。测试用例主要分为如下几部分： 　　全上传：通过分别测试64KB、4MB、100MB文件在不同并发下的上传情况，来测试平台的上传并发性能； 　　全下载：通过分别测试64KB、4MB、100MB文件，在不同的并发条件下（包括1000、3000、6000并发），并通过分别下载同一个文件、200个不同文件（模拟热点文件）、40000个不同文件（模拟完全下载不同文件），测试平台的下载文件的性能； 　　读写混合操作：测试64KB、4MB、100MB文件在不同的上传下载比下的情况下的并发性能； 　　网盘场景模拟：模拟E云网盘业务场景，测试平台并发性能。 　　三、测试结果及分析 　　（一）全上传并发性能测试 　　结果分析。根据测试结果来看，对于64KB、4MB、100MB大小的文件，在1000、3000、6000并发全上传情况下，系统都能正常运行。就上传带宽利用率来说，在6000并发下，上传100MB文件的带宽利用率最高。 　　（二）全下载并发性能测试 　　其中，全部下载