VSAN方案介绍手册

VMwarevSAN方案介绍

演讲人赵晓阳日期Agenda1vSAN架构与使用场景2vSAN配置与运维实践3vSAN双活方案4案例介绍5问题与解答

数据中心的演变-通过软件驱动基础架构3独立的服务器和存储机架外置SAN分布式模式VSANNetworkingvSphere服务器机架VSANNetworkingvSphere分布式模式VSANNetworkingvSphere服务器机架智能的软件存储、网络、计算统一管理接口弹性扩展无需感知硬件变化软件Software将存储的需求融合到标准的X86机架一体化交付硬件网络超融合基础架构:软件定义数据中心的理想选择4开放系统/传统的基础架构超融合基础架构Management

ComputeNetworkingStorage软件定义的数据中心简单敏捷可扩展高性能...软件定义的存储针对虚拟机进行了优化超融合体系架构（分布式，横向和纵向扩展）可在任何标准x86服务器上运行将HDD/SSD池化为共享数据存储提供企业级的高可用性、可扩展性和性能基于策略的自动化，满足SLA，可按虚机甚至vmdk级别的颗粒度设置存储策略与VMware产品体系深度集成OverviewVirtualSANDatastorevSphere+VirtualSAN...VMware

VSAN专为虚拟化环境设计的存储架构备份与灾难恢复虚拟桌面(VDI)可以很好地满足访问峰值时的桌面系统性能(引导、登录、读写风暴)更具细粒度的扩展，减少初始投资支持更高密度的虚拟桌面部署研发、测试按需实现资源调配，快速的资源置备较低的成本自动化运维，全生命周期管理可通过云管理平台实现自助式服务站点A站点B与VDAP,vSphere

Replication和SRM等解决方案紧密集成可显著降低灾备站点的存储开销简化数据中心的管理任务业务关键应用内置于全球最稳定最领先的虚拟服务器与vSphereHA/FT技术紧密集成确保高可用单主机7读3写混合配置能达4万IOPS，全闪存达9万IOPSVSAN常见使用场景专为虚拟化优化的存储：简单，快速且高性价比存储双活无需专用的、昂贵的外置阵列，使用标准机架服务器确保站点级的高可用支持OracleRAC和WindowsMSCSAgenda1vSAN架构与使用场景2vSAN配置与运维实践3vSAN双活方案4案例介绍5问题与解答VirtualSAN软件需要：VMware

vSphere

6

以上VirtualSAN的软件许可VirtualSAN集群需要：至少有三台主机为VirtualSAN数据提供存储每台主机至少配置一块用于缓存的SSD磁盘每台主机至少配置一块用于存储的HDD/SSD磁盘VirtualSANESXi集群成员需要：由VirtualSAN提供支持的VMkernel端口VirtualSAN的最低要求vSAN兼容列表CONFIDENTIAL9/resources/compatibility/search.php?deviceCategory=vsanBuildYourOwnbasedonCertifiedComponents.vSAN集群主机注意事项VirtualSAN集群主机：集群中各主机软硬件配置相同主机中存储设备驱动程序和固件版本，均要满足vSAN的兼容要求尽量不要将仅有计算资源的主机添加到群集中请勿为了节电而在主机上配置CPU电源管理策略为便于维护，请考虑使用驱动器托架和PCIe插槽位于服务器主体前方的主机。VirtualSAN硬件资源注意事项

Virtual

SANCPU资源：为Virtual

SAN提供10%的CPU开销Virtual

SAN内存资源：为获得完整的VirtualSAN功能,每ESXi主机至少需要32GBVirtualSAN支持1Gb和10Gb的以太网适配器：对于混合配置，专用带宽为1Gbps对于全闪存配置，专用或共享带宽为10Gbps与VMwarevSphere®NetworkI/OControl共享以公平分配带宽的10Gb适配器支持大多数环境。VirtualSAN网络适配器注意事项具有vSphereNetworkI/OControl份额的分布式交换机VirtualSAN主机vmk0管理10虚拟机15vmk1vMotion25vmk2vSAN50多播模式：VirtualSAN流量的物理交换机和路由器上启用多播巨型帧(MTU

9000)：在大型部署环境中开启巨型帧可以减少CPU的开销针对全新部署启用VirtualSAN支持多种控制器：SAS/SATA存储控制器：支持直通或RAID0模式使用RAID0模式时，性能取决于控制器每种控制器支持的驱动器数量列深度小(不足256)的控制器会影响虚拟机I/O性能禁用存储控制器缓存，如果不能禁用该缓存，请将其设置为100%读取。禁用高级功能（例如，HPSSD智能路径）处于RAID0模式的存储控制器：所有磁盘配置为RAID0模式使用ESXCLI手动将设备标记为SSDVMwarevCenterClient手动将设备标记为SSD

VirtualSAN存储控制器注意事项13VirtualSAN

集群主机ESXi开关机顺序1、单一vSAN节点重启/关机*一定要进入维护模式,即使主机上已经没有运行的虚拟机WebClient进入维护模式的三个选项:EnsureaccessibilityFulldatamigrationNodatamigrationVirtualSAN集群主机ESXi开关机顺序(continue)2、停止/启动全部vSAN集群场景一:vCenter未部署在vSAN集群中：关闭所有虚拟机

所有vSAN节点进入维护模式确保vSAN参数选择NoDataMigration使用WebClient或vSphereClient进行关机操作VirtualSAN

集群主机ESXi开关机顺序(continue)场景二:vCenter部署在vSAN集群中：关机顺序：1、关闭除vCenter虚拟机以外的其他所有虚机2、关闭vCenter虚拟机，Webclient将会断连3、将所有的主机置于维护模式，需要使用命令行来进行操作

#esxclisystemmaintenanceModeset-etrue-mnoAction4、关闭所有的主机VirtualSAN

集群主机ESXi开关机顺序(continue)场景二:vCenter部署在vSAN集群中开机顺序：1、为所有ESXi节点加电,优先为vCenter虚机所在主机加电2、vSphereClient直连vCenter所在ESXi主机,退出维护模式,

启动vCenter虚拟机3、登录vSphereWebClient检查vSAN状态4、通过WebClient或者vSphereClient为其它虚拟机开机vSphere环境的升级顺序ESXi、vCenter软件版本升级注意事项1、注意各版本的兼容性vCenterESXivSANon-diskformat2、升级顺序

vCenter->ESXi->vSANon-diskformat升级vCenter时,建议备份存储策略和分布式交换机配置或者创建快照vSAN环境硬件的变更维护更换HBA/RAID卡如果是Pass-through模式，

更换操作对磁盘组没有影响如果是RAID模式，由于可能引起设备名称变化，建议迁移所有数据更换故障硬盘：若服务器支持热插拔硬盘,可以在线进行物理更换操作若磁盘为RAID模式,则需要使用HBA工具重建RAID0

vSAN环境硬件的变更维护更换Cache层SSD磁盘需要重建磁盘组更换容量层SSD/MD磁盘务必在vSAN磁盘管理中从磁盘组中移除故障磁盘把新磁盘加入原磁盘组中关于VirtualSAN

预留空间的最佳实践建议为vSAN留出30%的空间：如果一个磁盘使用率超过80%，vSAN将开始起执行数据平衡操作如果所有磁盘都达到80%，vSAN将开始尝试调整数据,使所有的磁盘使用率基本相同实施数据迁移操作,将需要较多的临时空间开销(如磁盘格式升级,节点数据迁移)如果更换了vSAN存储策略，有可能会需要额外空间来存放临时文件VirtualSAN集群日常巡检监控1、vSANHealthCheck2、容量监控3、性能监控VMwarevSAN–

HealthCheckVMwarevSAN–监控管理(容量监控)VMwarevSAN–监控管理(性能监控)应急操作指导方针避免：随意重启主机（除了已处于维护模式状态下的主机）如确需重启主机以隔离问题,应确保数据已经完成同步,或有足够完整副本同时重启多台主机或者连续快速序列重启多台主机删除磁盘组在系统处于非健康状态时,调整vSAN配置(如增减节点)Agenda1vSAN架构与使用场景2vSAN配置与运维实践3vSAN双活方案4案例介绍5问题与解答L3nomulticastL3nomulticast仲裁vESXiappliance站点AVSANActiveL2withMulticastvSphere+VSANStretchedClustervCenter站点BVSANActive要点概览支持跨站点的vMotion和HA支持跨机房的灾难规避和灾难恢复支持OracleRAC和WindowsMSCSVSAN双活可保护您的关键数据中心应用不受站点范围内故障的影响提供零RPO优势概览无需（多个）存储网关，越简单越可靠标准x86服务器，不受品牌、规格的限制统一、简便的管理，没有复杂的配置和维护针对不同的虚拟机采用不同的保护策略vSAN双活介绍VSANStretchCluster29SiteASiteBvSphere+VSANStretchedClusterHDDSSDHDDSSDHDDSSDHDDSSDHDDSSDHDDSSD<5msRTTover>10/20/40gbpsActiveActiveL2withMulticast200msRTTover100mbpsL3nomulticastFaultDomainAFaultDomainCFaultDomainB200msRTTover100mbpsL3nomulticastwitnessvESXiapplianceWitness的节点与其他两个站点之间的延时可以在100ms以内（RTT<=200ms）。SiteA与SiteB之间延时小于5ms，带宽大于10GbpsL3nomulticastL3nomulticast仲裁vESXiappliance站点AVSANActiveL2withMulticastvSphere+VSANStretchedClustervCenter站点BVSANActivevSAN双活结合SRM实现两地三中心站点CVSAN任何距离vSAN国内案例31用户场景客户客户挑战与需求WhyVSAN?SolutionVDI（桌面虚拟化）国内排名前五的证券公司VDI的总体成本压力提升用户体验存储管理复杂高性价比无需在外置磁盘阵列上大额投资可以随VDI规模在线扩展管理简单1000点*HorizonView高级版柜面+OA关键应用山东新华书店(商流,物流,电子书城,出版行业桌面云)新业务系统难以即刻交付管理运维困难投资和运维成本越来越高降低设备成本与节能；提高运营效率；大幅提高性能；大幅降低TCO；存储虚拟化提高利用率6*VSANwithNVMeSSD开发测试中国三大政策性银行之一传统存储管理复杂降低存储投资扩展性管理简单无需购买高端存储线性扩展80*VSANSDDC(广电云)某省广电(媒资管理系统,OA,HR,财务,广告管理等)高性能I/O海量存储池高扩展性成本压力自动化部署高IO吞吐,低延迟大容量,

容易扩展高性价比与云平台集成自动化部署210*VSANstandard远程或分支办公室全球排名前列的零售巨头分支机构运维管理人员对于vSphere了解不够熟练节省购买存储的成本；利用vCenter可以在地区总部进行统一管理3000多个节点Agenda1vSAN架构与使用场景2vSAN配置与运维实践3vSAN双活方案4案例介绍5问题与解答33挑战/需求原有存储宕机，导致业务中断希望采用双活存储方案，但是传统存储厂商技术复杂，并且都有不同的限制传统的存储供应商对于双活存储的报价已经超出预算，并且从长期而言，性能、容量的增长并不持续传统的双活增加了复杂性，对运维管理人员有很大挑战解决方案在标准的x86服务器上部署VirtualSA