超融合bp培训hx hand on操作手册

前 培训目 测试环 联想HX综合功能测 简易安装部 安装准 使用Foundation快速部署AHV 快速初始化配 集群健康检 创建虚 Prism统一管理运维工 Prism主页信息概 查看空间使用情 系统健康检 硬件状态检查及查看硬件利用 直观和丰富的报表功 统计分析和告警界 一键式不间断系统升 查看ControllerVM配 命令行交互界 增加节点，扩展集群（可选 其他联想HX功能测 硬件故障辅助定位 RESTAPIExplorer--查询所有RestAPI接 SupportPortal--打开技术支持中心Licensing--更新集群 AuthenticationConfiguration--添加AD域管理验 CreateUser--创建用 SMTPServer--配置邮件服务器地 Configuration--配置告警邮 AlertPolicies--告警策略配 创建Volume 虚机迁 定制虚机并创建通用镜 收集集群日志用于停止集群及关机操 从Esxi的windows虚机迁移到 修改CVM/AHVIP地址（可选 备份与灾备功能(可选 小 联想HX可靠性及冗余测 冗余性测 CVM冗余测 电源冗余测 链路冗余测 节点冗余测 磁盘冗余测 小 联想HX平台性能测 基本I/O性能测 4K随机读写性 4K随机70%读30%写性能测 8K随机70%读30%写性能测 512K连续100%写性能测 512K连续100%读性能测 小 参考资 前培训目验证联想HX验证联想HX基于KVM的虚拟化管理套件AcropolisHypervisor验证联想HX验证在联想HX测试环联想HX型每节点（共三个节点内硬网HX-E5-SSD:2x480GBHDD:6x1TB2x10GB4x1GB10BaseT1x100MIMPI实际可用容量8TB节点安装NOS版本第一组IP使用范围–0第二组IP1–0第三组IP1–0第四组IP使用范围1–CVMAHVIPMIIP（无分配静态地址，保留原有联想HX综合功能测简易安装部安装准准备NTP务器（用于同步cluster间果出现不一致，比如可能会看到比我们的实际时间+8个小时，cluster一样）。DNS服务器（可选）。去Nutanix上账户，地址https://p /，用邮箱去，完成后直接可以登录使用，以下所有从官网的文件，建议用md5sum算一下md5值，确保的完整性，以防后面使用过程中出现选择SupportPortal，找到Download选项，选择Foundation页面，如下选择红色圈起来的文件，iso_whiist文件包含了合法通过的iso文件。除了中间的Foundation源文件，联HX系列还需要第三个foundation-3.1.1-HX-series.tar.gz更新包切换到Acropolis(NOS)的界面，选择4.x的版本正常安装。该文档是安装esxi，可以使用lenovocustomizedesxiiso，自行 /us/en/products/servers/lenovo-x86-servers/lenovo-converged-hx-可以看到的iSOmd5和whilelist文件的内容一致如果是希望集群创建之后，跑diagnosticstest，切换到toolsandfirmware，diagnostic文件万兆口。一般使用万兆口。然后与接入交换机连通；使用万兆口，安装VMware可以使用千兆口），然后与接入交换机连通；同时记下SystemX前面板显示屏里IMM的IPMI在安装之前需要考虑网络的规划，Nutanix每个节点需要三个IP地址，包括了IPMI、Hypervisor和CVM；Nutanix集群也需要一个IP地址，同时需要设置DNS、NTP服务器等；同时Foundation和安装笔记本或台式机也各需要一个IP地址；如果有VLAN的设置，需要提前规划好，并且要在接入交换机上做Trunk端口；具体的网络规划和配置参考第一章节。在安装之前需要安装桌面端的虚拟化软件，安装virtualbox者vmwareworkstation在PC或者笔记本上，Foundation虚机网络设置如下图，该本地网卡需要通过网线连接到和万兆交换机使用Foundation快速部署AHV设备是出厂并且安装过的带有ahv设备，需要执行以下步骤destroycluster（注意：该步骤将清除所有首选打开三节点任意的控制台，看到ahv终端界面，使用root用户登录，是nutanix/4u，然后ssh到ssh 也是nutanix/4u重启三个节点，进入UEFI面配置IMMIP，据第一章节的环境手册开启Foundation虚机nutanix户登录之后以看到桌面两个文件一个set_foundation_ip_address，另外一个是NutanixFoundation点击set_foundation_ip_address，设置FoundationVM的IP、子网掩码、网关及DNS等信息，然后选择保存如果是HX系列，需要将foundation-3.1.1-HX-series.tar.gz使用scp到虚拟机内部／tmp下，使用tar-xzvffoundation-3.1.1-HX-series.tar.gz解压缩，将现有nutanix用户 选择所要安装的Hypervisor，这里选择ahv，然后选择NOS的Package和HypervisorISOImage，点击下一步注释：NOS的安装包需要提前将安装包nutanix_installer_package-danube-<version>-<update>.tar上传Foundation的/home/nutanix/foundation/nos下Hypervisor的安装ISO需要提前上传到Foundation的/home/nutanix/foundation/isos/hypervisor/[esx｜hyperv｜如果是希望集群创建之后，跑diagnosticstest，diagnostictestfiles到合适的位注意因为当前是nutanix用户登录，上面的文件用户和组用户都应该是nutanix，如果是root请修改2.2.7点击NutanixFoundation，启动Nutanix安装配置过程，进入到全局配置界面，需要根据事先规划好的网络配置会自动侦测到配置Iso选点击创建一个Cluster，输入ClusterName、Cluster外部IP地址、CVMDNS服务器、CVMNTP服务器、HypervisorNTP服务器、最大冗余数，当前3节点，RF只能选择2.在核对信息完成后，选择run安装过程大概需要1小时，安装完最终效例如ssh给Hypervisor设置ovs-vsctlsetportbr0然后执行命令查看现有虚拟网络端ovs-vsctllistportssh然后执行命令修改VLAN设完成安装，使用cvmip地址登录prism管理界面，第一次登录提示修改 （可选）删除集群过登录某个节点CVM控制台，使用如下方式可以删除之前创建nutanix@NTNX-J30VL52-A-CVM:4:~$cluster2016-05-3103:57:17INFOcluster:2073ExecutingactiondestroyonSVMs2016-05-3103:57:17INFO*****CLUSTERNAME*****Thisoperationwillcomple yerasealldataandallmetadata,andeachnodewillnolongerbelongtoacluster.Doyouwanttoproceed?(Y/[N]):y…（可选）创建集群登录某个节点CVM控制台［nutanix@NTNX-J30VL52-A-CVM:4:~$cluster-s4,5,6create2016-05-3020:03:20INFOcluster:2073ExecutingactioncreateonSVMs2016-05-3020:03:24INFOcluster:795Discoveredip:rackable_unit_serial:J30VL52node_position:Anode_uuid:0ccbf565-558d-4b62-b0ad-2016-05-3020:03:24INFOcluster:795Discoveredip:rackable_unit_serial:J30VL4Znode_position:Anode_uuid:53feb2f9-0570-4e2c-8967-2016-05-3020:03:24INFOcluster:795Discoveredip:rackable_unit_serial:J30VL4Ynode_position:Anode_uuid:db1f1d9e-c25d-4e0b-a9e3-…登录某个节点CVM控制台nutanix@NTNX-J30VL52-A-CVM:4:~$ncchealth_checksrun_allncc_version:2.2.3-550ddc51cluster clustername:esxtestnodewithservicevmid4…快速初始化配集群创建好认创建了一个defaultstoragepool和default可以手动创建新的Container，集群健康检NCC创建虚linux如果是windows点击接下来创建windows虚机果是windows2012系统需要安装VirtIO提供的驱动。VirtIO提供了scsi驱动（在添加磁盘的时候，BUStype如果选择IDE，在系统安装过程中，可以直接识别该磁盘。BUStype选择SCSI，则需要在系统安装过程中，加载virtio内置的scsi驱动，才可以识别分配的磁盘），网卡驱动。如果虚机系统是win2008R2或者win7系统，在添加磁盘的时候，BUStype只可以选择IDE，安装完系统之后需要先安装SHA-2codesigningsupport，这个升级文件从微软获得。接下来安装VirtIO提供的网卡驱动和SCSI驱动。关于VirtIO使用，具体参 /#/page/docs/details?targetId=AMF_Guide-Acr_v4_6:vm安装windows2008DISK项里面的CDROM择添加的镜像iso文件同时把virtIO文件（该文件从nutanix，iso格式），sha-2升级文件“Windows6.1- -x64.msu”制作iso格式（可以使用ultraiso），这两个文件挂载到虚机（前提也是要先上传到image最后添加一个30G的磁盘安装系统，注意磁盘BUStype选择IDE接下来添加虚拟网卡，在添加虚拟网卡之前，需要创建network接口创建完后，添加虚拟网最后点击save，保存该虚机配置创建的虚机开机。选择launchconsole打开控制台，发现在下面阶段可以看到添加的磁往下继续安装，安装完后，安装sha-2签名升级文件。安装完重启打开设备管理器，使用virtIO对以下设备安装驱动安装windows不走和windows2008似，cdrom除了挂载window2012像ViriIO动添加磁盘，bustype选择SCSI。还有添加网络，保存该设置对该虚机poweron，下面阶段提示找不到硬盘选择加载驱把以下驱动加上加完驱动可以识别添加的硬盘。往下安装，直到系统完成安装Prism统一管理运维工Prism主页信息概联想HX自带的管理控制台Prism，不仅可以提供所有服务器、等基础架构硬件的管理， 查看空间使用情Nutanix将服务器中的所有汇聚为一个统一的池（StoragePool），并在池中为虚拟机划分相应的切换为storage我们可以通过Storage页面的来获取Nutanix系统使用情况的统计信息通过概览页面（Overview），我们可以获得有关的（从左至右）：信息汇总，性能图表，告警和，可以看到storagepool物理可用大小为16.02TB。可以看到contaniner最大可用容量为8.01TB，这是由于RF=2，双副本策略。所以实际可用大小是物理storage大小的一半系统健康检题的排查，这里我们示例cluster旁边红色的1，显示说明是powersupplycheck出现问题，如下图点击右上角managecheck，会提示causeoffailure硬件状态检查及查看硬件利用通过硬件状态页查看当前硬件版本、配置及运行情况，一旦出现问题时，可借助TurnOn通过概览页面（Overview），我们可以获得系统硬件配置的（从左至右）：信息汇总，性能表单，告警和硬件事直观和丰富的报表功可对指标项进行报表展示，并且可将不同节点的同一项在一个报表界面中呈现，也可以在同一个界面中呈现同一节点的不同项统计分析和告警界NutanixWebConsole除了前面展示的一些默认统计图表外，我们还可以通过ysis页面的来具体定制我们需通过Alerts页面的我们可以详细查看所有的告警和信息，并且通过鼠标悬停，能够获得对于该告警或的针对不同告警，可以配置响应的告警策略通知管理员，避免发生告警风暴，如下图也可以创建alert一键式不间断系统升通过一键式升级快速完成NOS、Hypervisor和磁盘firmware具体操作请看操作演示查看ControllerVM可以通过Prismweb管理界面查看CVM的当前配置。包括vCPUs，命令行交互界通过 连接到CVM，以命令行方式查看集群当前状态增加节点，扩展集群（可选参考“3.Add其他联想HX功能测硬件故障辅助定位RESTAPIExplorer--查询所有RestAPI接SupportPortal--打开技术支持中心当需要寻求技术支持时，可以直接从Prism界面中打开技术支持中 ，并登陆即Licensing--更新集群点击License来为集群添加新的以下是手工更新集群license关于licence的操作，参考文档附件“licenseAuthenticationConfiguration--添加AD域管理验添加AD和验证的IP地址端口可以使用AD进行用户验证，但前提需提前创建AD域服器，当前环境没有AD，CreateUser--创建用SMTPServer--配置邮件服务器地 Configuration--配置告警邮配置发送告警邮件给管理员或者联想HXAlertPolicies--告警策略配Filesystem ists--文件系统白允许特定网段的 联想创建Volume创建volumegroup，名称为VG1，磁盘大小为30G。同时添加iscsiinitiator的iqn白。该iscsiinitiator可以是集群内或者集群外的虚机/物理机。我们把上一节创建的windows虚机的iqn号的添加进打开windowsiscsiinitiatorVG1。（一网络选择连接，确定已经是连接的状态VGAHV虚机迁Win2012-1虚机从主机7迁移到主机迁移虚机测试持续，另外一台虚机测试掉两个包，符合正常测迁移完定制虚机并创建通用镜在AHV集群，可以使用Cloud-init去定制LinuxVMs，Sysprep工具定制windowsVMs.Sysprep通常用来一般化windowsSysprepwindows并通过answerfilewindowsAnswerfileSysprep信息去完成无人值守的安装，信息参考本测试使用Sysprep工具，该工具是windows一般化该虚机之后，在CVMconsole下，使用acli命令行模式，找到该虚机系统磁盘创建通用镜使用该镜像模版部署虚部署成收集集群日志用于NutanixClusterCheck(NCC)introducestheLogCollectorplugin.AOSimplementsmanylogsandconfigurationinformationfilesthatareusefulfortroubleshootingissuesandfindingoutdetailsaboutaparticularnodeorcluster.LogCollectorexaminestheclusterandLogsandconfigurationinformationforoneormoreControllerConfigurationinformationforlogsgeneratedbysysstatsInformationaboutTousethelogcollector,runthefollowingcommandfromaControllerVM.nutanix@cvm$ncclog_collector[plugin_name]Receplugin_namewithoneofthefollowingpluginLogCollectorstorestheoutputinazippedtarfilenamedlog_collector_logs.tar.gzin/home/nutanix/data/log_collectordirectoryontheControllerVMwheretheNCCcommandwas例子停止集群及关机操登录任意节点CVMPRISM登录到每个节点的CVM制台，关闭CVM成2才能往下进行第3登录到每个节点AHV制台闭从Esxi的windows虚机迁移到安装NutanixVMmobility到windowsVM上，该工具可以到nutanix官网： 迁移vmdisk到ahv（AcropolisDistributedStorage在Prismwebconsole，添加esxiHypervisorhostIP到AHV集群文件系统白在esxi主机上添加添加完把该虚机Storagevmotion到添加的迁移完成之后，关闭该虚拟机转换迁移的磁盘到AHVformat（Create在prismwebimageconfiguration，uploadimage.在url上传成在AHV创建windows选择创建虚机，添加disk，择clonefromimage创建完成之后选择开Windows虚机正常启修改CVM/AHVIP地址（可选备份与灾备功能(可选“Section8小联想HX产品融合计算与，管理运维简单，数据集中安全、快速部署、扩展方便，统一的Prism管理界面允许用户在单个界面中管理所有服务器等基础架构硬件和联想HX集群管理所有基础架构硬件和虚拟机并且可以包括CPU内存磁盘空间、IOPS、吞吐带宽、读写延迟等多项指标，并且可以和传统软件进行有效集成，不会额外增加用户复杂度；针对性能数据可以方便的通过Prism界面进行报表展示灵活的项定义是的报表功联想HX可靠性及冗余测冗余性测CVM冗余测J30VL5（7通过登录该节点的CVM，：sudoshutdown,该操作直接关闭CVM。经测试，节点上正在运行的VM并未受到影响，未发生断续。CVM电源冗余测任意关闭一个电源，Prism界面有信息，联想HX设备工作正常链路冗余测任意一根uplink在任一台CVM控制台下，可以看到当前节点的桥接设备br0的uplink链路接口是eth0断开一种其中一跟链路，eth0down节点冗余测Prism界面出现节点失效的提示，并开始在其他节点上恢复受影响VM，表示HA主面板当前状态，数据弹性状态是critical，虚机HA磁盘冗余测当联想HX在工作时，将一块SSD硬盘拔出，系统工作正常，Prism移除开始同在硬件管理界面可以看到L54这个节点少了一个硬盘同步完将磁盘插回去之后，系统恢复正常，记录重建时将一块磁盘拨出插入后，在hareware管理界面，点击重新分区和添重新分区完成当HX在工作时，将一块SAS硬盘拔出，系统工作正常，Prism界面有告警移除硬盘重建完重新插回该SAS，选择repartioinand通过插拔SSD/SAS硬盘测试，重建阶段虚拟机可通和正常运行，业务并不会造成影响小联想HX平台性能测测试场测试场测试测试目测试条目/步结基础I/O测>测试随机读写的性全随机，50%读50%写，IO大小能，同时观察CPU和存的使用情（观察展性持续测试5分钟，记录象CVM和主机全随机，70%读30%写，IO大小>测试顺序读写的性能，同时观察CPU和持续测试5分钟，记录存的使用情（观察全随机，70%读30%写，IO大小象CVM和主机持续测试5分钟，记录设置条件：每节点2全顺序，100%写，IO大小windows2012虚机持续测试5分钟，记录（虚机48G内存）运全顺序，100%读，IO大小IOmeter(4worker持续测试5分钟，记录时测试)，为了更好测试性能每个虚拟挂6个5g的scsi类型盘Nutanix测试方法：登录任意cvm，使用nutanix平台自带的测试工具测试，测试命diagnostics.pyrun;测试截图如下连续读带宽为3108MBps随机写IOPS基本I/O性能测4K随机读写性2VM/Node,1IOmeter/VM,4IOmeter:MaxDiskSize–IOmeter:#ofoutstandingI/Os:IOmeter:AccessSpec–TransferRequestSize:4IOmeter:AccessSpec–PercentRandom/SequentialDistribution:100%IOmeter:AccessSpec–PercentRead/WriteDistribution:50%Read50%Write4K随机70%读30%写性能测2VM/Node,1IOmeter/VM,4IOmeter:MaxDiskSize–IOmeter:#ofoutstandingI/Os:IOmeter:AccessSpec–TransferRequestSize:4IOmeter:AccessSpec–PercentRandom/SequentialDistribution:100%IOmeter:AccessSpec–PercentRead/WriteDistribution:70%Read配置说明：每个节点上建2个Windows虚机，每个虚机里运行一个IOmeter，每个