easystack东信老挝私有云平台存储性能测试报告

1、东信老挝私有云性能测试目录1、文档目的32、适用范围33、设定34、性能测试4、测试环境说明4、测试内容4、云硬盘测试5、测试过程54.4.2、测试小结8附录-测试环境准备8附录-云盘测试环境准备9文档属性属 性内 容级别文档级别文档编 写 人刘海平审 核 人文件修订1、文档目的为了确保云用于规范云性能满足客户需求，使能够最大化发挥应有的性能，特编写此文档，性能测试和云网络性能测试。2、适用范围本文档适用于项目实施过程中对云的性能测试和网络性能测试。3、设定Ceph安装部署请严格按照如下要求执行：设定条目设定内容备注说明CPU关闭节能开启 CPU 最大化性能序号版本号简要说明修订日期变更人审核

2、人备注1v1.0创建测试规范20171127刘海平1东信老挝云测试20181011刘海平4、性能测试4.1、测试环境说明4.2、测试内容测试内容需要按照如下方式测试，测试时长为画图，测试内容如下：5min，平均值，并通过 Excel备注说明：通过测试随机读写获取吞吐量/带宽。最大的 IOPS，通过测试顺序写获取最大的测试范畴测试引擎测试内容组合类型云硬盘测试libaio4K 随机写 randwrite8:16 和 8:324K 随机读 randread8:16 和 8:324K 混合读写 rmmixwrite8:16 和 8:321M 顺序写 write8:16 和 8:32测试内容参考指标数

3、量/值Ceph测试Monitor 数量3osd 数量40单机数*磁盘数10 台*4，一块 SSD 做磁盘模式RAID0,Write Back日志盘：数据盘比1:4云硬盘测试虚拟机规格8-16384-60云磁盘大小200G测试工具LinuxFioWindowsGeekbench测试时间900s数据盘单盘 RAID0 Writeback设定直通模式，影响性能日志盘单盘 RAID0 Writeback日志盘和数据盘比控制在 1:6 以内IO 调度算法 noopNVME 无法修改，默认为 none网络网络带宽：万兆光/电口确保运行在万兆网络上Ceublic 与 Storage 分离确保 ceph 两个

4、网络物理PG合理设置 pg_num 和 pgp_num确保 pg 均匀分布在 osd 上4.3、云硬盘测试4.3.1、测试过程截图每次，1. 4K 随机写，分别4K 随机写、4K 随机读、4K 混合读写、1M 顺读写的2. 4K 随机读3. 4K 混合读写4. 1M 顺序写16:32 比例1. 随机写：2. 4K 随机读3. 4K 混合读写4. 1M 顺序写4.4.2、测试小结如下是云硬盘性能汇总：附录-测试环境准备在 ceph-monitor 节点安装 ceph-devel 包：yum -y install ceph-devel解压 fio.tar.gz 进入 fio 目录: ./confi

5、gure (确保输出结果中：Rados Block Device engineyes); make ;make install在 ceool 里创建 rbd 镜像，假设在 compute pool 里建 100G 的名字为 rbdtest 的镜像：rbd -p test create rbdtest -s 102400把 fio.conf 拷贝至任意目录下，并执行 fio /path/to/fio.conf fio rbd.fiorbd.fio 文件内容如下：global direct=1 time_based group_reporting ramp_time=5 runtime=900io

6、depth_batch_submit=1plete=1ioengine=rbdcntname=admin pool=rbd rbdname=rbdtest Size=100g randread 4k#随机读 4k numjobs=16 iodepth=32 bs=4k rw=randreadrandwrite 4k测试内容numjobs:iodepth 比4：168:324K 随机写 randwrite14.2k156614K 随机读 randread36.9k35.0k4K 混合读写 rwmixwrite20.1K(read)/ 8619(write)13.1K(read)/ 5631(wr

7、ite)1M 顺序写(带宽)259MiB/s346MiB/s附录-云盘测试环境准备基于云创建一台 8C-16G-40G 的云主机，创建并挂载一块 200G 的云磁盘用于测试4K 随机写fio -ioengine=libaio -bs=4k -direct=1 -rw=randwrite -size=100G -filename=/dev/vdb-name=randwrite 4KB -numjobs=8 -iodepth=16 -runtime=900 -thread-group_reporting4K 随机读fio -ioengine=libaio -bs=4k -direct=1 -rw=

8、randread -size=100G -filename=/dev/vdb-name=randread 4KB -numjobs=8 -iodepth=16 -runtime=900 -thread -group_reporting3.4K 混合读写(写占 30%)fio-filename=/dev/vdb-direct=1thread-rw=randrw-rwmixread=70-ioengine=libaio-bs=4k-size=100G-numjobs=8-iodepth=16-runtime=900-group_reporting -name=mytest4. 1M 顺序写：fio -ioengine=libaio -bs=1M -direct=1 -rw=write -size=100G -filename=/dev/vdb-name=read1024KB -numjobs=8 -iodepth=16 -runtime=900 -thread-group_reporting#随机写 4k stall numjobs=16 iodepth=32 bs=4k rw=