vSAN云系统存储性能优化最佳实践

1、vSAN云系统存储性能优化最佳实践vSAN基础结构如何提升vSAN性能vSAN 性能监控工具快速定位vSAN性能瓶颈收集vSAN性能数据2目录#vSAN基础结构3RAID-0C1C2C3简述vSAN结构vSAN基本概念RAID-1RAID-0C1C2C3WitnessVMDKvSAN是基于对象的分布式存储vSAN环境中的基本单位是“对象”(Object)对象的类型包括：VMDKVM文件夹VM swap快照文件每个对象由一个或多个“组件”(Component) 构成组件会根据应用给对象的“存储策略”(Storage Policy)分布在vSAN集群节点 上存储策略可以分配给VM或者VMDK对象见

2、证组件组件构成的对象副本A组件构成的对象副本B存储策略例如：FTT=1 SW=34简述vSAN结构vSAN IO路径VMDKCLOM来管理对象的存放位置DOM根据CLOM的决定来进行具体实施vSCSI与DOM Client进行通信DOM Client与DOM Owner进行通信DOM Owner仲裁如何访问对象DOM Component Mgr 管理组件LSOM与底层硬盘进行交互vSCSIDOM ClientDOM Comp.MgrLSOMPSADOM Comp.MgrLSOMPSADOM Owner相同主机相同主机或不同主机跨越主机Checksum5Erasure Coding去重和压缩#如

3、何提升vSAN性能6提升vSAN性能的方法硬件选型使用正确的方法进行规划设计VMware vSAN 设计和规模设定指南使用vSAN全闪配置硬件性能差异全闪配置与混合模式的不同的“读”机制使用vSAN兼容列表里列出的高性能硬件例如：PCI-E或NVME闪存设备、40Gb网卡7软件版本选择使用vSAN最新版本- 新的功能、更好的优化提升vSAN性能的方法8提升vSAN性能的方法硬件配置硬件驱动固件符合兼容列表磁盘控制器、硬盘和网卡所有vSAN节点硬件处于健康状态主机电源管理选择“最高性能”配置多个磁盘组多个磁盘组=更多的缓存层容量增加并行写入的速度9提升vSAN性能的常见方法网络配置延时测试场景I

4、OPS丢包测试场景IOPSNative47000 IOPSNative47000 IOPS+5 ms Latency33000 IOPS1% 丢包率42300 IOPS+10 ms Latency23100 IOPS2% 丢包率32000 IOPS10% 丢包率3400 IOPS使用25Gb以上的网络避免网卡变成性能的瓶颈使用高质量网络减少网络丢包和网络延时10提升vSAN性能的常见方法网络配置11Jumbo Frames可以减少CPU的消耗需要保证网络链路上所有端点配置相同使用多物理网卡和LACP增加带宽，减少延时需要物理交换机进行相关的配置提升vSAN性能的常见方法虚拟机日常使用12根据实

5、际需求选择正确的存储策略- FTT、加密、去重压缩对性能的影响#vSAN性能监控工具13vSAN 性能监控工具vSAN性能监控：集群/主机/VM-监控-性能esxtop -xvsantopvSAN Observer14优点：图形界面保存48小时的记录操作方便支持集群/主机/虚拟机不同主体vSAN 性能监控工具vSAN性能监控：集群/主机/VM-监控-性能vSAN 集群15vSAN 节点虚拟机vSAN 性能监控工具vsantop优点：选项丰富高定制化即时刷新16vSAN Observer优点：集群级别易读性高收集特定时间段内的性能数据可以下载vSAN 性能监控工具1719vSAN 性能监控工具e

6、sxtop -x优点：学习成本低可同时监控CPU/内存/网络/磁盘资源技巧：关注延时的数值Client和Owner- 网络CompMgr- 磁盘磁盘-快捷键“u”磁盘控制器-快捷键“d”网络-快捷键“n”vSAN性能 快捷键“x”#快速定位vSAN性能瓶颈19技巧#1：结合实际情况使用不同的工具图形界面：操作方便、可读性强、存在延时 命令行：即时反馈性能状态快速定位vSAN性能瓶颈技巧技巧#2：利用“分层”的思路找到性能瓶颈，快速定位问题20快速定位vSAN性能瓶颈vSAN性能监控与vSAN IO路径的对应关系在不同的主体进行监控：集群主机虚拟机每个层面有通用的指标有具体的指标来判断是否正常常

7、见的指标包括：拥堵值命中率延时21案例-1 缓存层SSD的物理/固件层延时影响性能缓存层SSD的物理/固件延时非常高22故障现象VM性能缓慢重启主机故障依旧vSAN健康检查没有报警23案例-2 网卡异常影响vSAN性能常规检查 - 望闻问切确认故障现象是否有明显的硬件告警环境是否进行过变更受影响范围是特定VM还是所有VM受影响范围是特定主机还是所有主机案例-2 网卡故障影响vSAN性能使用esxtop进行排查发现一台主机的DOM Owner延时高定位网络相关故障检查网卡状态发现大量CRC报错更换网卡后故障解决24#如何收集vSAN性能数据25vSAN 性能监控工具vSAN性能监控：集群/主机/

8、VM-监控-性能esxtop -xvsantopvSAN Observer26如何收集vSAN性能数据27收集esxi主机日志vSAN性能监控 vsantop收集vSAN Observer性能数据 vSAN Observer收集esxi主机性能数据esxtop -x如何收集vSAN性能数据收集esxi主机日志需要收集集群中所有主机日志优先收集Master主机的日志包含过去48小时的性能信息- 参考KB#203289228如何收集vSAN性能数据29收集vSAN Observer性能数据建议在故障复现时收集1-2小时的性能数据- 参考KB#2064240收集esxi主机性能数据只针对本台主机的性能数据可以单独收集esxtop性能数据- 参考KB#