glusterfs多节点读写性能测试.docx

测试环境：glustefs端：Glusterfs版本：glusterfs 3.6.1 built on Nov 7 2014 15:15:50系统版本：CentOS release 6.5 (Final)内核：Linux version 3.4.45硬件环境：CPU：Intel(R) Xeon(R) CPU E3-1230 V2 @ 3.30GHz内存：32GB硬盘：4块128GSSD 11块2T SATA盘client端：Glusterfs版本：glusterfs 3.6.1 built on Nov 7 2014 15:15:50系统版本：CentOS release 6.5 (Final)内核：Linux version 3.4.45硬件环境：CPU：Intel(R) Xeon(R) CPU E3-1230 V2 @ 3.30GHz内存：8GB网络环境：gluster端：服务器网络配置为bridge，单根网线接到交换机上。data-node3ip设为10.3.211.3，data-node4ip设为10.3.211.4，data-node5ip设为10.3.211.5，data-node6ip设为10.3.211.6。client端：eth0设置固定ip192.168.10.200，eth1、eth2、eth3三个网口做bond0，ip设为10.3.211.11，四个网口四根网线连接到交换机上。系统节点：IP 别名 Brick10.3.211.3data-node3/brick/brick1/10.3.211.4data-node4 /brick/brick1/10.3.211.5 data-node5 /brick/brick1/10.3.211.6 data-node6 /brick/brick1/192.168.10.200 data-client测试目的：测试不同节点数下使用glusterfs建立stripe卷挂载到3网口做bond0的client端上，测试他的读写性能测试方法测试工具：ddfio测试方法：不同节点数下建立stripe卷，挂载到client端使用dd命令测试他的吞吐量,fio测试iops测试过程测试步骤1、添加信任池gluster peer probe data-node3gluster peer probe data-node4gluster peer probe data-node5gluster peer probe data-node62、创建stripe卷两个节点glustervolume create test stripe 2data-node4:/brick/brick1/testwdata-node3:/brick/brick1/testw三个节点glustervolume create test1stripe 3data-node4:/brick/brick1/testdata-node3:/brick/brick1/testdata-node5:/brick/brick1/test四个节点glustervolume create test2stripe 4 data-node4:/brick/brick1/teste data-node3:/brick/brick1/teste data-node5:/brick/brick1/teste data-node6:/brick/brick1/teste3、启动stripe卷glustervolume start testglustervolume start test1glustervolume start test25、挂载到client端mount.glusterfsdata-node3:/test /mnt6、使用dd命令测试吞吐率dd if=/dev/zero of=/mnt/dd.imgbs=1M count=600007、使用fio测试iops测试脚本#!/bin/bashcd /mntsleep 10rm -rf test*sleep 30cd /sleep 10/usr/local/bin/fio --name=/mnt/test --direct=0 --iodepth=96 --rw=randread --ioengine=posixaio --bs=4k --size=16G --numjobs=20 --runtime=3600 --group_reporting /fiotest/fio.logsleep 100cd /mntsleep 60rm -rf test*sleep 300cd /sle