版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
安全说 产品规格介 简 特性和规 组件识 前面板组 硬盘托架上的指示 后面板组 主板组 系统主板跳线说 操 接通服务器电 断开服务器电 设 安装操作系 硬件选件安 处理器选 内存选 BIOS设 常用操 BIOS参数说 Firmware BMC设 简 服务器系统概 Web Smash-Lite 系统信息和状 设备状态监控和诊 日 事件告 诊 BMC自动恢 指示 BMC网 用 协议和端 时间和 BIOS和 存 服务器控 电源和功 风扇转速控 固件更 恢复出厂设 控制台重定向 虚拟媒 附 常见故障及诊断排 常见故 诊断排除说 更换电 管制标准通 管制标准标识 联邦通信委员会通 欧盟管制通 欧盟家庭用户废旧设备处 安全说明韩国通 安全说明中国通 电池更换通 静电放 防止静电放 防止静电释放的接地方 服务条 安全说明安全说明警告: 为防止系统漏电造成电击危险,务必将系统和外围设备的电源电缆插入已正确接地务必使用电源线的接地插脚,不要使用转接插头或拔下电缆的接地插脚,在未安装接地导线及不确定是否已有适当接地保护的情况下,请勿操作使用本设备,可与电工联系咨询。 路,不要将其丢入火中或水中,也不要暴露在温度超过60摄氏度的环境中,请勿 为了您更好地使用设备,以下注意事项将帮助您避免可能会损坏部件或导致数如果出现以下任何情况,请从电源插座拔下产品的电源线插头,并与浪潮的客户服务部门联系:102024 5安全说明安全说明打开产品包装、接触或安装内部组件或接触不绝缘的调制解调器电缆或插孔之前,请断开调制解调器电缆。工作中请定期触摸接地导体或机箱上未上漆的金属表面,以便导去身上可能损坏内部组件的静电。关闭系统电源并断开电缆,包括断开系统的任何连接。断开电缆时,请抓住电缆的连接器将其拔出,切勿拉扯电缆。小心处理组件和插卡,切勿触摸插卡上的组件或接点。拿取插卡或组件时,应抓住插卡或组件的边缘或其金属固定支架。机柜完成安装后,请确保支脚已固定到机架并支撑到地面,并且机架的所有重量均已落在地面上。按下组件滑轨释放闩锁并将组件滑入或滑出时,请务必小心,滑轨可能夹伤您的手指。80%。NP5570M5基于全新一代英特尔®至强®可扩展处理器打造,最大支持TDP150WCPU210.4GT/sUPI较低功耗。支持16条2666MT/sDDR4ECC内存,内存支持RDIMM,LRDIMM,1T162.5SATA、SAS43.5SATA2SATA,支持单1+1NP5570M5外观图特性和规 ®Skylake&cascadelake150W器,并包含支持120W以下各功耗点的处理器,支持低电压版本处理器。不支持FPGAFabricQAT16DIMMDDR4CPU8RDIMMLRDIMM和I/OUSB2USB3.02USB3.01USB3.01VGA1VGATPM1TPM2RJ4511000MbpsIPMIBMCBMCRSTUIDUIDAST2500BMCIPMI2.032M2.5”x8、x16SAS、SATA、SSD3.5”x4SATA双电一款:500W1+1冗余100-733mm601mm33.1kg(10℃--40℃-20%-80%20%-93%(40℃)2.53.5ResetPower0-72.5USB3.0USB3.08-152.5RAIDBMCIPMIUSB3.0UIDVGAPCIPCI-EBMC复位按IPMIUIDVGAPCIE0_CPU0卡插槽PCIE1_CPU1卡插槽PCIE2_CPU1卡插槽PCIE3_CPU0卡插槽PCIE4_CPU0卡插槽PCIE5_CPU0卡插槽VGATPMUSB3.0M.2SATA0USB+LCDSATA1PMBUS(6主板跳线介绍(CMOS跳线,跳线位置参考如上的主板组件图CMOSJ891-22-3CMOS注:设置设置要使服务器能够正常运行,其中必须装有一个支持的操作系统。有关支持的操作系统的最新信息,请访问浪潮网站(/eportal/注:ROM1:将ClipCPUClipCPU2:散热器标签上“1ClipClip3CPU1的位置与主板CPU1234CPU散热器与CPU注1:2:将内存底部缺口对准内存插槽定位点,拇指同时下压内存两端,将内存BIOSPurleyAMICodebaseLegacyUEFIBIOS根据产品的不同配置,BIOSBIOS“Press<DELtoSETUPor<TABtoPOSTor<F11toBootMenuor<F12>按“F2”BIOSSetup按“TAB”键,显示POST按“F12”PXEBIOSBIOS设置BIOSSetup<←>或<→><↑>或<↓><HomeUEFI/Legacy登录到SStpAvancMCnfiratioEtrBootModeIMode/LegacyMode)进Network,Storage,VideoOpromPolicy,OtherIdevicesOptionM1.2目前浪潮PurleyUEFIMode,UEFIlegacy2.2TGPTIPv6/IPv4PXEUEFIShell如果BootMode设置为LegacyMode,Network,Storage,VideoOpromPolicy,OtherPCIdevicesOptionROMLegacy。BootModeUEFIMode,NetworkOptionROM的执行方式必须UEFI,Storage,VideoOpromPolicy,OtherPCIdevicesOptionROMUEFI,如果有特殊需求可以设置为Legacy。登录到BIOSSetup界面,“Main”界面将显示当前系统系统信息概要,显示BIOS,BMC和ME的版本信息,CPU,PCHSKU,RC1.3BIOSBIOS设置查看CPUBIOSProcessorProcessorConfigurationProcessorInformation”EnterCPU1.4Enter1.5RAIDBIOS”ChipsetPCHSATAConfiguration/PCHsSATA1.61.7BIOSBIOS设置RAID将SATAModeOption选项设为【RAID】,F10BootModeUEFIBIOSSetupAdvancedRAIDCreateRAIDVolumeEnter1.101.1。BIOSBIOS设置1.1CreateRAID16RAID请选择RAID卷级别,如果目前还没有创建卷,在此有(Mirror)、RAID10(RAID0+1RAID5(Parity)四个卷级别可供选择,请根据RAID022RAIDRAID12RAIDRAID104RAID卷44RAID5(Parity):33RAIDSelectRAIDEnterXEnterRAIDStripRAID0RAID5RAIDHelpRAID删除RAIDRAIDVolumeEnterEnterBIOSBIOS设置BootModeLegacy模式,在系统启动的过程中屏幕将提示RAID1.14SATARAID1.15,SATARAID(IDRAID导信息),1.2SATARAIDCreateRAIDRAIDDeleteRAIDRAIDResetDiskstoNon-RAIDRAIDMaskDiskas标记硬盘为备用模式,作为备用硬盘会清空里面数据,并且设置RIDResetDiskstoNon-RAID退出SATAHostRAIDCreateRAIDVolumeSATARAID键选中本菜单,然后按【EnterRAIDRAIDCreateRAIDVolumeCreateRAID16RAID请选择RAID(Mirror)、RAID10(RAID0+1RAID5(Parity)四个卷级别可供选择,请根据RAID0:22RAIDRAID1:2RAIDRAID104块硬盘做此RAID卷44RAID5(Parity):33RAIDSelectRAIDEnterXEnterRAIDStripRAID0RAID5RAIDBIOSBIOS设置thisvolume?(Y/N):”。如果确认要创建RAID卷,请输入“Y”,将会创建卷,同时所选择硬盘上的数据将会全部丢失。如果不创建RAID卷,请输入“N”,退出卷的创建。在此我们输入“Y”,创建RAID卷,创建完成后,回到MAINMENU配置主界面,并会在RAIDRAIDDeleteRAIDVolumeDeleteRAIDVolume1.17示。按DEL键删除所选RAID卷,系统会弹出提示:“ALLDATAINTHEVOLUMERAID“Y”,如果取消删除RAID“N”。ResetDiskstoNon-RAIDResetDiskstoNon-RAID图1.18所示,系统会显示RAID卷中的所有硬盘,请根据实际需要用空格键选择要重置的硬盘,然后按Enter键重置硬盘,系统再次提示“AreyousureyouwanttoRAIDSpare?(Y/N)”,根据提示键入“Y”或“N”spareBIOSBIOS设置BMCBMCBIOSServerMgmtBMCNetworkConfigurationBMCBMCIPv4BMCIPv61.21,1.22BMCGetBMCSharelink/Dedicated获取BMCDoNothing:不做操作Auto:BMCManual:GetBMCSharelink/Dedicated获取BMCDoNothing:不做操作Auto:BMCManual:BMC网络Do配置BMC网络状态参数设置。当GetBMCDedicatedParametersManual】时显示,Unspecified:BMCStatic:BMC网络参数设置:DynamicBmcDhcp:BMC网络参数:CurrentConfigurationAddress显示当前BMCStationIPBMCIPSubnetStationMACBMCMACBMCIP设置BMC静态网络参数BIOSBIOS设置StaticBMCIPAddressSourceSuccess!!”,BMC网络会立即被设置成1.23StaticIP,Enter1.24,1.25IPIP“InvalidStationIpEntered!IPaddressIP1.26BMCBMCWeb界面BIOSBIOS设置设置BMC动态网络参数设置成功后提示:“SetDynamicBMCIPAddressSourceSuccess!DynamicBMCNetworkParametersareGettingNowPleaseWaitaMoment!”1.27BMC30sEnter认OK1.2830s“GetDynamicBMCDhcpSuccess!!”,1.29请尽可能保证使用Manual手动设置选项时,BMCBIOSSetup界面立即生效的选项是通过调用Callback函数来实现的,只有BIOSSetup界面下选项发生变化时才会调用Callback函数处理,否则功能不会生效。例如如果您想再次自动获取BMCparameters,GetBMCSharelinkParameters设置为【Donothing】或【Manual】,然后再设置【Auto】,这时功能BMCIPv6BIOS7.1.1MainBIOS系统的基本信息,BIOS、BMCME的版本信息,CPU型号信息,内存总容量信息及系统时间等。具体参数说明如表2.1所示,Man界面如2.1BIOSBIOS设置2.1MainProductSerialCustomerBIOSBIOSBuildBMCFirmwareBMCFWMEFirmwareMEFWAccessCPUCPUCurrentCPUPCHPCHRCRC显示当前DRAM内存总容量AEPTotalAEPSystemMemorySystemSystemDate(Day用<Tab<Enter1)SystemTime用<Tab<Enter1)AdvancedBIOSACPIPCICSM、USB2.2Advanced2.22.2AdvancedSuperIOAST2400I/OSerialPortConsolePCISubsystemPCICSMCSMOnboardLANUSBDevicesUSBNetworkStackIntel(R)EthernetConnectionX722for-DriverBIOSBIOS设置TrustedComutig2.3示,TrustedComuting2.32.3TrustedComputingSecurityDeviceBIOSTPMTCGversion1.2/2.0。BIOSTPM软件绑定来支持TPM模块,当软件绑定验证失败时,BIOSSELNoSecurityDevice显示当前安全设备的状态信息,目前没有信息显示,如果MSuperIOSuperIOConfiguration2.52.5SuperIOConfigurationSerialPort0串口0配置设置,配置页面中提供了该串口的开关控制和资源调整控制功能,资源调整主要是可以手动调整COMPORT使用的IOPORTIRQ号。SerialPort11(虚拟串口.1SerialPort0BIOSBIOS设置2.5SerialPort0ConfigurationSerial0EnabledChangeSerialPortConsole2.7SerialPortConsoleRedirection当ConsoleRedirectionCom0/Com1Enabled】,ConsoleRedirection2.8BIOSBIOS设置2.8ConsoleRedirectionSettingsBitsperDataOdd(奇校验)StopFlowHardwareVT-UTF8ComboKeyVT-UTF8RecorderRedirection100×31PuttyPCISubsystemPCISubsystemSettingsPCIBIOSBIOS设置2.9PCISubsystemSettingsAbove4G4GSR-IOVSR-IOVCSMCSMConfiguration2.102.10CSMConfigurationCSMGateA20A20UponRequest:如果需要A201MB以上UponINT19TrapBootLegacyUEFIUEFIMode:UEFILegacyMode:传统模式UEFIOptionRomDonotlaunch:不启动UEFI:UEFIOptionRomVideoOPROMVideoOptionRomOtherPCIPCIOptionRomOnboardLANOnboardLANConfiguration2.11,OnboardLANConfiguration2.112.11OnboardLANConfigurationOnboardPHYCardPHYPHYNICnMACMACNICnPXEBIOSBIOS设置NetworkStackNetworkStackConfigurationNetworkUEFIPXE2.12,NetworkStackConfiguration2.122.12NetworkStackConfigurationNetwork以下选项受该选项控制,只有该选项启用,以下选项才能显示,功能才可设置。Ipv4PXEUEFIIpv4PXEIpv4HTTPIpv4HTTPIpv6PXEUEFIIpv6PXEIpv6HTTPIpv6HTTPIPSECIPSECPXEbootwaitESCPXEboot0~5MediadetectChipsetPCHSATA/sSATA、USB、ME2.13,Chipset2.132.13ChipsetPCHSATAPCHSATAPCHsSATAPCHsSATAUSBUSBServerMEMEPCHSATAConfiguration/PCHsSATAPCHsSATAConfigurationPCHSATAConfiguration界面是对板载的sSATASATA2.14-12.14-2PCHSATAConfigurationSATA口硬盘配置,PCHsSATAConfiguration2.14BIOSBIOS设置2.14-2.14-2.14PCHSATAConfigurationSATASATASATAMode设置SATA模式,选项参数有:AHCI/RAIDSATAPortSATA0~7PortSATAPCHsSATAConfigurationUSBUSBConfigurationUSB端口进行开关设置。USBConfiguration5USBConfigurationXHCIUSB3.0PortXHCIUSB3.0USBUSBBIOSBIOS设置USBPortConnectedtoSDSDUSBUSBPortConnectedtoBMCUSB所示,MiscellaneousConfiguration2.162.16MiscellaneousConfigurationRestoreACPowerAC上电开机电源状态设置,选项参数有:PowerOff)PowerOn)PowerMaxPageTable比较旧的OS,请选择2MB,VGA(UEFI。OnboardDevice:板子设备优先。OnboardServerME2.17,ServerMEConfiguration2.172.17ServerMEConfigurationME有效固件版本RecoveryFirmwareME备份固件版本MEFirmwareStatusMEFirmwareStatusCurrentErrorRecoveryPTTSuppressPTTPPTBIOSBIOS设置MCTPBusMEFirmwareMEFW所示,RuntimeErrorLogging2.182.18RuntimeErrorLoggingSystemProcessor2.19Processor2.192.19ProcessorCommonUPIUPIMemoryIIOIIOAdvancedPowerManagement所示,ProcessorConfiguration2.20BIOSBIOS设置2.20ProcessorConfigurationActiveCPU核数设置,输入所要开启的CPU核数,Help信CPUCPU0HyperThreadingMaxCPUIDValueCPUID当传统操作系统启动不支持CPU扩展CPUID请启用该选项。IntelTXTHardware令或数据从内存预取到L2缓存中,借此减少内存读L2RFOPrefetchL2RFOAdjacentCacheDCUStreamerDCUDCU流预取功能可以预读取CPU的数据,从而减少DCUIPDCUIPDCUIPLLCLLCDCU32KB8WayWithoutECC16KB4WayWith32KBExtendedAPICAES-AES该菜单主要控制CPU是否支持AES指令,这些指令CommonCommonConfiguration界面是通用选项设置。具体参数说明如表2.21CommonConfiguration2.21BIOSBIOS设置2.21CommonConfigurationMMIOMMIOMMIOHighGranularityMMIONumaUPIConfiguration2.222.22UPIConfigurationUPIUPIUPIDegradeFeaturePrecedence)当系统设置冲突时通过设置TopologyPrecedencefeature,或是通过设置FeaturePrecedence来降低LinkSpeed9.6UsePerLinkL0pL1UPIFailoverUPISubNUMASubNUMA集群设置,选项参数有:Auto:IMC1-cluster2-clustersEnabledSNC(2-clusters1-way的IMC交错Disabled:SNCXPTXPTLegacyVGAVGALegacyVGAVGAMemoryMemoryConfiguration2.23BIOSBIOS设置2.23MemoryConfigurationEnforcePORMemoryNVMDIMM:DDR4数据扰频开关设置,选项参数有:EnableADR使能开关设置,选项参数有:LegacyADRADRADRDataSaveADR数据保存模式设置,选项参数有:BatterybackedDIMMsErase-ArmErase-ArmNVDIMMs开关设置,选项参数有:Restore修复NVDIMMsInterleave交错NVDIMMs2xRefresh2xMemory内存拓扑子菜单,MemoryMapMemoryRASRASMemoryMemoryMap2.24MemoryTopology2.24BIOSBIOS设置2.24MemoryMapeADReADR功能的开关设置,选项参数有:1LM内存交❹间隔设置,选项参数有:256BTarget,256BChannel64BTarget,64BChannelIMCIMCwaywayChannelChannelwaywaywayRankRankwaywayInterleavel8-way4GBMemoryRASMemoryRASConfigurationRAS2.25,MemoryRASConfiguration2.252.25MemoryRASConfigurationMirrorMirrorModeTAD0EnablePartialPartialMirrormodeUEFIARMMemoryRankRankEnabledRankSDDCPlusSDDC+1开关设置,选项参数有:ADDDCADDDC热备开关设置,选项参数有:SetNGNDieNGNDieBIOSBIOS设置PatrolPatrolScrub0,表示为自动PatrolScrubAddressSystemPhysicalAddressReverseSystemPhysicalIIOIIOConfiguration2.262.26IIOConfigurationSocketNSocketNCPU0PCIELinkspeedMaxPayloadSize,ASPMIntelVTforDirectedI/O(VT-IntelVMDIntelVMD技术相关设置子菜单,每个CPU的每个PStackVMDPCIeHotPCIePCI-EASPMPCIEASPM总开关设置,选项参数有:L1Only:仅PCIeMaxReadRequestPCIeAdvancedPowerManagementAdvancedPowerManagementConfigurationCPU电源管理相关选项设置,具体参数说明如表2.27,AdvancedPowerManagementConfiguration2.272.27AdvancedPowerManagementConfigurationPower/PerformanceMaximumPerformanceMinimumPowerCPUPStateCPUPHardwarePMStateCPUCStateCPUCPackageCStatePackageCCPU-AdvancedPMCPU性能和节能调整子菜单SOCKETRAPLSocketRAPLBIOSBIOS设置CPUPStateCPUPStateControlCPUP2.28所示,CPUPStateControl2.282.28CPUPStateControlUncoreFreqUncoreDisabled(MinFrequency)Disabled(MAXFrequency)ConfigTDPBootperformanceOSBIOSMaxPerformanceMaxMaxTurboHardwarePMStateHardwarePMStateControlPM2.29,HardwarePMStateControl2.292.29HardwarePMStateControlHardwareP-P-StatesOS主动设置,根据实际测试Disabled:硬件选择P-StatesOS请求NativeMode:硬件选择P-StateOS引导OutofBandMode:OS引导NativeModewithNoLegacySupportNativeEPPEPPCPUCStateCPUCStateControlCPUCCPUBIOSBIOS设置2.30CPUCStateControlMonitor/MwaitMonitor/MwaitAutonomousCoreC-CCPUC6OSC6C1EPackageCStatePackageCStateControlPackageC2.31,PackageCStateControl2.312.31PackageCStateControlPackageCPackageC状态设置,选项参数有:C0/C1stateC2C6(Retention)stateNoC0/C1CPU-AdvancedPMCPU-AdvancedPMTuning界面是CPU节能性能相关选项设置,下设EnergyBIOSBIOS设置2.32EnergyPerfBIASPowerPerformanceOSControlsEPB:OSBIOSControlsEPB:BIOSBIOSControlsENERGY_PERF_BIAS_CFGPerformance)BalancedPower)Power)PowerPerformanceTuningBIOSControlsEPBWorkloadI/OSOCKETRAPLSOCKETRAPLConfigRAPL配置相关选项设置。具体参数说明如2.33,EnergyPerfBIAS2.332.33SOCKETRAPLConfigPL1PowerPL1PL1TimePL1PL2PL2PL2PowerPL2PL2TimePL2SeverServerMgmt界面是服务器管理相关选项设置,包含看门狗、BMC网络设置、BMC2.34ServerMgmt界面2.34BIOSBIOS设置2.34ServerMgmtBMCSelfTestBMCBMCFirmware当前主板BMC固件版本号FRB-2FRB-2FRB-2TimerFRB-234566FRB-2TimerFRB-2DoNothingPowerDownPowerPowerOSWatchdogOS看门狗时钟开关设置,选项参数有:OSWtdTimerOS看门狗时钟超时时间设置,选项参数有:5minutes10152010OSWtdTimerOSDoNothingPowerDownPowerBMCNetworkBMCBMCUserBMCVLANVLAN配置子菜单ViewFRUFRUBMCLoadBMCBMCnetworkBMCnetworkconfigurationBIOSBMC管理网络进行配置。具体2.35,BMCnetworkconfiguration2.352.35BMCnetworkconfigurationSharelinkBMCSharelink网络开关设置,可实现设置成功BMCIPv4NetworkBMCIPv4BMCIPv6NetworkBMCIPv6BIOSBIOS设置BMCIPv4NetworkBMCIPv4NetworkConfigurationBIOSBMCIPv42.36BMCIPv4NetworkConfigurationGetBMCSharelink/DedicatedBMCDoNothing:不做任何操作Auto:BMCManual:BMC网络DoBMC网络状态,选项参数有:Unspecified:BMC网络参数Static:DynamicBmcDhcpBMC网络参数当前BMC配置地址状态StationIPSubnetStationMACMACBMCIPv6NetworkBMCIPv6NetworkConfigurationBIOSBMCIPv62.37BMCIPv6NetworkConfigurationGetBMCSharelink/DedicatedParametersBMCDoNothing:不做任何操作Auto:BMCManual:BMC网络DoBMC:Unspecified:BMC网络参数Static:DynamicBmcDhcp:BMC网络参数当前BMC配置地址状态StationIPv6PrefixBMCUserBMCUserSettingsBIOSBMC用户进行配置。具体参数说明如2.38,BMCUserSettings2.38BIOSBIOS设置2.38BMCUserSettingsAddChangeUserAddUserAddUserBIOSBMCBMC2.39AddUser2.392.39AddUserUser16User820UserChannelBMC1UserPrivilege”SetUserAccessCommandPassed”,BMCUserBMCWeb界面。DeleteUserBIOSBMCBIOSBIOS设置2.40DeleteUserUserUser输入要删除用户密码,输入密码正确后,会弹出提示“UserDeleted除成功的用户将立即在BMC中生效,该用户将无法再登录BMCWeb界面。ChangeUserChangeUserSettingsBIOSBMC用户设置。具体参数说明如2.41,ChangeUserSettings2.412.41ChangeUserSettingsUserUserChangeUser820UserChannelBMC1UserPrivilegeOEMProprietaryNoAccessVLANVLANConfiguration界面BIOSBMCVLAN2.42所示,VLANConfiguration2.42BIOSBIOS设置2.42VLANConfigurationBMCVLAN控制开关设置,选项如果启用VLAN,需要设置VLANID才能设置VLANBMCVLANID2~4094VLANIDBMC共享口/专口的VLAN优先级设置,范围ViewFRUViewFRUinformationBIOSBMCFRUBIOSBMC交互,保持FRU信息的同步更新。具体参数说明如表2.43ViewFRUinformation2.432.43ViewFRUinformationProductProductPartBoardBoardBoardChassisPartSystemBIOSBIOS设置2.442.44SecurityAdministrator820User820SecureBoot2.45,Boot2.452.45BootSetupPromptSetupSetup65535BootupNumLockNumlock指示灯状态开关设置,BootOptionsAddEFIShellToBoot设置为Enabled,开机Logo显示为制造商设置的FixedBootOrderPrioritiesBootOption#XXXXXDriverBBSXXXX设备BBSSave&Save&ExitBIOSBIOSBIOS设置2.46Save&ExitSaveChangesandDiscardChangesandSaveChangesandDiscardChangesandSaveDiscardSaveasuserBootFirmwareBIOSUEFIshellOSUEFIShell在系统启动过程中出现InspurLogo,“Press<DELtoor<TABtoPOSTor<F11toBootMenuor<F12toPXEBoot.”F11AfuEfi64,cdAfuEfi64,BIOS.bin32MBIOS+ME3.2ME16MBIOS:AfuEfix64.efiBIOS.bin/bBIOSBIOS设置ME32MME+BIOS命令:AfuEfix64.efiBIOS.bin/p/n/x/k/l/me,3.4/BProgramBoot/PProgrammainbios/NProgram/KProgramallnon-critical/MEProgramMEEntireFirmware注:LinuxOSafulnxBIOS,afulnx3264BIOSbin/n/x/k/l,3.5BIOSBIOS设置MEBIOSME,执行命令:./afulnx_64BIOS.bin/b/p/n/x/k/l/me,BIOS.binBIOSbin3.62BIOS+MEBMC本章描述了基板管理控制器(BMC)BMC是主机服务器系统下的一个独立系统。这个独立系统有自己的处理器和内存BMC系统管理。IPMI2.0,IMPIKCSLan管理协议:IPMI2.0HTTPSSNMPSmashWeb控制台重定向(KVM)SerialOverBMC4事件报警、SNMPTrap(v1/v2c/v3)BMC固件更新RAIDBMCASPEEDAST2500是服务器管理子系统的处理器,基于ARM1176JZF-S32位RISCCPUBMC设置BMC设置作为BMCSuperVGA连接主机和BMC的USB接口,支持远程KVMBMCeSPILPCSIOBMCeSPILPCIPMIKCSBTPCIExpress接口主要用于图形控制器与主机之间的通信。图形控制器是符合VGA标准的控制器,支持2D硬件加速和完整的总线主控。图形控制器可支持高达1920x120032bpp@60HzPCIExpressBMCMCTP协USB2.0Hub接口用于远程键盘和鼠标以及远程存储支持。BMC支持各种存储设备,如CDROM、DVDROM、CDROM(ISO映像)、软盘和USB闪存盘。这些USB重定向从远程媒介启动。1IDPrimarySecondaryThirdPrimarySecondaryKCS/LPC,LPCKCSIPMBBMCIntelNM4.0。通信接口使用的是SecondaryIPMBLANBMCIPMIV2.0V1.5RMCPRMCP+IPMIBMC2(专用网络接口和共享网络接口)。IPMI2IPMIRAKP–RAKP-HMAC-RAKP-HMAC-HMAC-SHA1-RAKP-HMAC-HMAC-SHA1-AES-CBC-RAKP-HMAC-RAKP-HMAC-HMAC-MD5-RAKP-HMAC-HMAC-MD5-AES-CBC-RAKP-HMAC-MD5-RAKP-HMAC-MD5-AES-CBC-RAKP_HMAC_RAKP_HMAC_HMAC-SHA256-RAKP_HMAC_HMAC-SHA256-AES-CBC-BMC设置BMC设置IPMIBMCIPMIIPMISPEC3IPMI4IPMISpecGetDeviceBroadcast‘GetDeviceID’WarmGetDeviceGetNetFnGetCommandGetCommandSub-functionGetConfigurableCommandSub-SetCommandGetCommandSetCommandSub-functionGetCommandSub-functionGetOEMNetFnIANABMCWatchdogTimerResetWatchdogSetWatchdogGetWatchdogBMCDeviceandMessagingSetBMCGlobalGetBMCGlobalClearMessageGetMessageEnableMessageChannelGetSendReadEventMessageGetSystemSetSystemInfoGetSystemInfoGetSessionActivateSetSessionPrivilegeGetSessionGetSetChannelGetChannelSetUserAccessGetUserAccessSetUserGetUserNameSetUserPasswordActivateDeactivateGetPayloadActivationSetUserPayloadGetUserPayloadGetChannelPayloadGetChannelPayloadGetChannelOEMPayloadMasterWrite-GetChannelCipherSuspend/ResumePayload60h-GetChassisGetChassisSetPowerRestoreSetPowerCycleGetSystemRestartBMC设置BMC设置SetSystemBootGetSystemBootGetPOHEventSetEventGetEventPlatformEvent(a.k.a.“EventGetPEFArmPEFPostponeSetLastProcessedEventGetLastProcessedEventAlertPETSensorDeviceGetDeviceSDRGetDeviceReserveDeviceSDRGetSensorReadingSetSensorGetSensorSetSensorGetSensorSetSensorEventGetSensorEventRe-armSensorGetSensorEventGetSensorSetSensorGetSensorSetSensorReadingAndEventFRUDeviceGetFRUInventoryAreaReadFRUWriteFRUSDRDeviceGetSDRRepositoryReserveSDRGetAddPartialAddDeleteClearSDRGetSDRRepositorySetSDRRepositoryEnterSDRRepositoryUpdateExitSDRRepositoryUpdateRunInitializationSELDeviceGetSELReserveGetSELAddSELDeleteSELClearGetSELSetSELGetAuxiliaryLogSetAuxiliaryLogGetSELTimeUTCSetSELTimeUTCLANDeviceSuspendBMCGetIP/UDP/RMCPSerial/ModemDeviceSetSerial/ModemGetSerial/ModemSetSerial/ModemGetTAPResponseSetPPPUDPProxyTransmitGetPPPUDPProxyTransmitSendPPPUDPProxyGetPPPUDPProxyReceiveSerial/ModemConnectionBMC设置BMC设置SetSerialRoutingSOLCommandForwardingForwardedSetForwardedGetForwardedEnableForwardedBridgeManagementCommandsGetICMBSetICMBGetICMBClearBridgeGetICMBConnectorGetICMBConnectionSendICMBConnectionDiscoveryCommandsBridgingCommandsEventCommandsWeb支持HTTPS(端口443)访问WebGUI。HTTP默认禁用,用户可以通过OEMCMDWebGUI提供管理界面,用户可查看系统信息、系统事件和状态,并控制被管理以下浏览器支持Web5Windows7.1Windows8Windows10Ubuntu14.04.03LTSx64MACOSXFedora23CentOS7WindowsEdge,Firefox43,Chrome47+,IEFirefox43,ChromeMAChttps:/BMC_IP:sslport。第一次登陆BMCWEB,(在WebBMC设置BMC设置WebSMTPSMTPWebGUIWebGUIBMCBIOSRAID/SASRAID/SAS控制器拓扑结构HTML5JavaUID电源和风AC掉电恢复策略BMCBMCBMCDNS设NTPBMCSMTP电子邮件报警的SMTP设置SNMPTRAPIP/MAC访问限制策略BMCNCSIBIOSBIOSBMCBMCBMCBMCBMCBMCBMC显示当前和历史POSTADBMCBMCBIOSBIOS恢复BMCSNMPTCP/IPIPBMC设置BMC设置(如服务器、工作站、路由器、交换机等)的标准协议。SNMP能够使网络管理员提SNMP接收网络节点的通知消息以及告警事件报告等来获知网络出现的问题。BMCSNMPBMC获取网络信息、用户信息、温SNMPBMCSNMPGet/Set/TrapV1/V2C/V3SNMPv3MD5SHA,DESAESSNMPSNMPSetBMCSNMPTrapIPMITrapSNMPSmash-LiteBMCSmash-LiteCLISSHBMCSmash-LiteSmash-LiteSmashBMC设置BMC设置BMC设置BMC设置WEBGUI,CPU、内存、进入系统信息页面的“CPU”CPU6CPUCPUxxCPU0警告CPUx_Status7CPUx_CHy_DIMMz,x,y,z0DDR3BMC设置BMC设置8PCIEBMCMACMACIPIPMACMACBMC设置BMC设置FANx_yx,y警告警告注意:N/A警告BMC设置BMC设置注意:N/AWEBGUI,关机UIDUIDUIDCPU健康状态:CPU关机关机关机正常关机正常关机ME正常MEFWMEFW不可用或当前电源关闭8.7.9固件版本页面显示了平台内固件的版本信息,包括BMC、BIOS、ME、PSU、PCVVINVR、PVCCIOVR、PVDDQVR、CPLDBPCPLD。BMCBPPCVVINPVDDQFPGA(如果存在PSOC(如果存在8.7.10FRUEEPROM,BMCEEPROMFRU,BMCFRUBMC设置BMC设置FRUFRUID:FRU:生产日期:工作日/月/日/年:物理传感器监视主要设备的状态变化。从物理传感器收集的信息将传递给IPMI传感器。设备状态传感器:BMCIPMICPUDIMMPSUHDD温度:BMCCPU、PCH、DIMM、PSU等系统组件的温度,并监测入出口温度。电压:系统P12V、P5V、P3V3、PVNN、PVDDQ、PVCCIO、功耗:BMC监测总功耗、CPU功耗、内存功耗、电源输入功率。风扇功耗和HDD功耗是否支持根据平台实际需求而定。系统主要组件运行状况:BMC监控系统组件的健康状况,如CPU状态、PCHMEMHot、HDDPSU电源、MEFW状态。BMCIPMI:BMCIPMIIPMI2.0SELSELSELCMOS:BIOSCMOSBMCBMC启动:当BMC启动时,会记录一个事件。BIOSBIOSOSEvent-OnlyEvent-Only离散传感器仅用于事件生成,不能通过IPMIGetSensorReading(IPMI)访问。BIOS/OS或其他第三方客户端使用AddSELEntry(IPMI)SEL。IPMI2.0SensorTypeCodesIPMI2.0Event/readingTypeCodeRanges如果传感器事件类型是通用的,请参阅IPMI2.0GenericEvent/ReadingTypeCode。如果传感器事件类型是传感器特定的,请参阅IPMI2.0GenericEvent/ReadingTypeCode。触发/BMC设置BMC设置CPUThermalCattCPUVRPCHThermalMemMemVRBMCIPMI3639SELSELSEL(75%)时,将满的日志将被记录在SELSELSELSEL,SELSELWEBIPMICMDSELSNMPTrap、EmailAlert、Syslog在WebGUI系统事件日志”页面,显示所有基于传感器的日志,SELSELBMCBMC所有的WebWebSSH50K,50K,支持通过WebBMC设置BMC设置BMCBMCBMCCPUMSR、CSRCPUCatterr、ThermalTrip、Error2ECCCPU寄存器。IPMI3M支持通过WEB导出日志。BMCSNMPTrapSMTPSNMPTrapBMCSNMPTrapTrapBMCWebGUITrapIP,BMC,BMCTrapBMCTrapSNMPv1/v2/v3Trapv1MIBSNMPTrapSNMP162,IPMISNMPTrap设置SNMPTrapTrap设置告警类型和目标。首先启用三个选项之一。如果选择了SNMP,用户应该将目标设置为他的IP,如果选择了电子邮件,用户应该将LAN通道设置为专用或共享BMC设置BMC设置SMTPSMTP(SimpleMailTransportProtocolRFC821)邮件告警。BMC检测到事件发生时会通过电子邮件发送到制定的邮箱。SMTPLANSMTP服务器,如果有事件SMTPSNMPTrap3Syslog4可以配置接收服务器地址(IPv4IPv6FQDN)、端口号、日志类型、使能状态,并这些日志携带主机日志。考虑到安全性,SyslogTLSBMC或主机系统进行检查和验证的能力,以检查是否有某些BIOS(BIOSIO80hBMC设置BMC设置80h。BMC80hBIOSBMC将在服务器重启或关机时记录屏幕。BMC也支持BSOD(蓝屏死机)屏幕截Windows2012R2系统看门狗用于系统或BIOS检查功能是否超时及超时后触发相应的动作,例如BMC用户可以通过WEB或IPMI界面进行BMC任务重启,在出现异常情况时可以恢BMC。BMC,使用“ipmitoolmcresetwarm”,IPMIServer、Server、WEBServer冷启动BMC,WEB或“ipmtoolmcresetcold”,BMCBMC自动恢
BMCBMC已知的BMC故障场景:KernelBMCuboot加载内核时看门狗启动,超时时间为5BMC启动超时,BMCBMC系统启动后,主进程每隔一分钟复位看门狗,如果超时超过1分钟,BMC将重置。当进入刷写模式时,看门狗将被激活,20BM。当开始刷写镜像时,看门狗超时时间重新更新为20BMC定期检测内部服务的工作状态、进程异常时,BMC将重新启动相应的服务:IPMIKVMBMC设置BMC设置SYS当系统关闭时,SYS当系统工作正常时,SYSSYSCPU有以下事件发生:CPUCPUThermalSYSCPUCPUBMCBMCBMC开/关BMCECCPSU传感器错误CPU过热指示灯CPUProcHotPINBMCLAN通常情况下,BMC支持BMC专用LAN控制器和BMC/系统共享的LAN控制器。最大带宽:专用网卡--1000M,共享网卡--100MBMC网络接口兼容支持IPV4IPV6,DHCP或手动设置IP地址,MACEEPROM中。默认情况下,IPMILANBMCLANSecondaryBMCBMC网络聚合功能是指将多个网络接口聚合成一个逻辑绑定网络接口的方法。尽管绑定了多个网络接口,但一次只能有一个接口可用。在运行时,通过定时轮询监视netif_carrier(网络链接状态)。默认禁用绑定功能,用户可以在WEBGUI或IPMICMD仅支持Active-backup绑定模式。两个网卡(专用和共享NIC)绑定后,如线,BMCBMC启动之前,其中一个网卡已插入网线,然后另一个网卡在BMC启动后插入网线,则一开始插网线的网卡提供WEBBMCBMCVLAN,则无法启用网络聚合。自动配置:启用/IPMI绑定模式:显示当前的绑定模式。(此字段为只读N-I(网络控制器边带接口)是由分布式管理任务组(DMF)定义的电气接(BMC(NIC一个或多个(CI4)网络控制器(C)。网络控制器一方面连接了外部网络接口与内部主机接口,另一方面,又与管理控制器之间有一个带外接口。BMC设置BMC设置NCSIWebGUI中进行设置。在PurleyNCSIPHY卡、OCPABC卡,NCSIPCIENCSI登录WebGUI,进入“BMC设置->BMCBMC共享管理网卡类型:选择想要切换的网卡类型,点击“保存”。可用类型为NCSI通常情况下,NCSIBMC支持自动切换到其他网络端口。NCSI0。NCSI“BMCBMCIPMI、WEB、SSHSNMPBMC支持统一的用户管理机制,管理IPMI、WEB、SSH用户。由IPMI或WEB创建的用户将具有IPMI、WEB和SSH用户权限。通过SSH,用户可以访问Smash-LitCLI。SysadminBMC诊断串口,不能访问IPMI,WEBSNMPSNMPGet/SetUboot密码用于通过BMC诊断串口线访问BMCUbootIPMI/WEB/SSH统一用户BMC支持IPMI2.0IPMICMD或WebGUI1616LANNCSILAN注意:IPMI2-BMC设置BMC设置密码加密方案:64BitBlowfishBMC闪存中。18160~90015WebGUI,Web:xx”。如果密码过期,您需要通过OEMIPMICMD055~60如果登录失败次数达到登录失败重试次数,Web0~5N个密码)。只有WebGUIBMCBMCIPMIWEBGUI注意:864SNMPSNMPSNMPGet/Set,IPMIWEBGUI默认读取团体名为了安全,因为SNMPV1/V2cSNMPV3支持用户认证,支持的认证算法是SHA和MD5SNMPV3支持用户隐私,支持的隐私算法是DES和AESSNMPV3sysadminMD5rootuser;DES,保密密码为rootuser。注意:为保证系统的安全性,初次登录时,请及时修改初始密码,并定期更新BMC设置BMC设置SNMPV3支持用户认证,支持的认证算法是SHA和MD5SNMPV3支持用户隐私,支持的隐私算法是DES和AESUboot用户可以通过BMC诊断串口线访问BMCUbootUbootUboot,必须先设置密码,然后输入密码访问。联系我们的注意:UbootIPMIBMC有两种方法可以接收IPMICMD,带外模式是指通过局域网将IPMICMD发送给BMC,BMC将对用户和密码带内模式是指在服务器HOSTOSIPMICMD。在这种模式下,IPMICDOTOS,他将获得最高权限。OTOSIMICMD则。IPMI2.0GIPMI读/写WebGUI只有IPMI/WEB/SSH统一用户支持WebGUIWebGUIFRUBIOSBMCBMCNTPSMTPSNMPBMCBIOSBIOSBMCBMCBMCBMCBMCBIOSPSOCBMC设置BMC设置和按钮是禁用的,所以用户不能修改设置;如果是NA属性,设置是不可见的,不能“无访问权”无法登录WebGUISmash-LiteCLI(SSHBMC支持的网络服务可以进行在线配置,目前支持RCMP+、HTTP/HTTPS、KVM、CD-MEDIA、FD-MEDIA、HD-MEDIA、SSHSNMPWEBGUI中“BMCWEBGUI中“BMC设置->服务设置”展示了协议和端口默认非安全端最大会TCP/WEB控制台重定cd-fd-hd-SNMP1:Http/HttpsSNMPSeverDHCPV6DHCPV6KVMonVirtualMediaonBMC支持时间设置,BMC的时间为自1970/01/0100:00:00以来经过的秒数。通过WebGUI等界面,用户可以获取当前的BMC的系统日期和时间,或者配置日期NTPUTCNTPNTPNTPGMT+/-BIOS,BIOSBMC,BMCBIOSNTPNTPBMCNTPWebGUIBMCNTPBMCNTPBIOS
BMC设置BIOSBMCBIOSLPCKCSIPMIBMC进行通信。BMC设置BIOS为BMC通过“SetSELTimeCommand”BMCRTC在BIOS设置菜单中提供BMC信息并配置BMCBMC,例如CPUDIMMBMCBIOSIPMI看门狗定时器命令支持FRB2(请参见BMC看门狗章节)BIOS固件更新和MEBIOSBIOSBMCBIOSPort80POSTCodeNMI到PCH,非屏蔽中断。SMI之后,系统中最高优先级的中断。传统上此coredumps。AST2500SOCIO(SIO)SOLBMCUARTBMCUARTSOL功能。详情请参阅“SerialoverBIOSBMC支持BIOS当BIOSPOST完成时,BIOS将BIOS设置选项发送给BMCWebGUIBIOSBIOSIPMIWebGUIBIOSBIOSBIOSBIOSWebGUI“BMCBIOSBIOSBMC支持BIOSBIOS60BIOSBootNo进入“BMCBIOSBIOS进入“BMCBIOSBIOS
BIOSBMC设置RI、SSBMCI2CSRAID。BMC设置RAID9361-3008300830089305-9361-2208-9364-330839300-9305-9460-9460-9400-9400-9440-9440-340834083154-3152-3154-BMC访问RAID/SAS控制器示意图:I2CBMC访问RAID/SAS控制器示意图BMC设置BMC设置RAID(ID)(ID)(ID)(ID)WebBIOSBIOSUnconfiguredGoodSpinDownHotSpareSpinDownSAS(MB)RebuildRateReconstructionRateS.M.A.R.T(s)SpinupDelayShieldStateSupportedMaintainPDFailHistoryIDID(ID)(Cel)Raw(B)IDSASIsPathECapable紧急备用CommissionedHotspareIDUIDBMCIPMICMD和UID按钮分别控制UIDBMC,UIDUIDUIDUID:指定亮灯时长,然后单击“点亮定位灯”按钮打开UIDUID:单击“熄灭定位灯”按钮关闭UIDBMC设置BMC设置BMC10s,重启:效果同按下复位按钮(如果有的话)WebGUIIPMI2.0IPMIBMCBMC提供功率上限功能,功率上限功能为系统设定功率限制,当系统功率超过此上限时,IntelME会降低CPU频率以降低功耗。功率上限会影响服务器性能,需BMC提供以曲线为基础的进风温度和功率监测统计数据。管理员可以通过能源CPUBMC设置BMC设置BMC风扇转速的算法控制,WebGUI点击“电源和风扇->MCUCPLDBMCBMCMCUCPLD4BMCBMC支持双镜像固件刷新。BMC闪存包含两个镜像(BMC闪存大小为64M,BMC32M)。WEB更新,用户登录WebGUI,进入Flash页面更新固件。这是一个带外刷CflashS/Windows/LinuxSOCflash工具进行更新。这种模式没有固件完整性检查,SOflash覆盖闪存。所有配置将被删除。这是一种带内模式,用户需获取到系统用户权限登录到系统执行此模式。SOflash默认禁用,保证系统安全性,我们不建议用户使用SOCflash。每个固件镜像使用MD5工具生成MD5校验码(Hash.exe)BMC设置BMC设置MD5BMC支持闪存中的双镜像,当主镜像无法启动时,BMC会尝试使用WEBBMCWebGUI支持硬件看门狗,请参阅“BMCBMC固件时,用户可以指定要更新的镜像,可以选择:双镜像(默认BMC会重启,这意味着您必须关闭BMC,然后才能执行其他操作。1进入“管理->BMCBMC选择镜像文件,按上传按钮上传文件,BMC将在上传文件后进入刷写模式,IPMI服务将停止,然后BMC将验证镜像,校验大小应为32M;验证镜像完整性,确BMC,BMCBMC15(双镜像),BMC设置BMC设置BMCSOCFlash为保证系统安全,默认禁用High-performanceBus(AHB)总线,用户不能从HostBMCSOCflashSOCflash,High-performanceBus(AHBSOCflash。Windows/linux/DOS系统更新BMC,进入DOS、Linux或Windowssocflashif=ImagefileBIOSBMCWebGUIBIOSIntelMEBIOS支持两种更新模式“BIOSME”和“BIOSOnly”BIOSBIOS,BIOSNVRAMBIOS如果同时更新BIOS和ME,为了使MEAC断电后启动。登录WebGUI,进入“管理->BIOS固件更新”,如下图所示。选择BIOS+MEBIOS默认BIOSMEBIOSBIOSPHYMACBIOS选择镜像文件,点击“上传”按钮上传文件,ME将进入恢复模式,然后BMC验证镜像。32M;验证镜像完整性,BIOS如果校验失败,BMC将停止刷写,并将ME更改为正常模式。3ME进入正常模式。BIOSCPLDBMCJTAGCPLD。支持WebGUIBMCWebGUIBMC设置BMC设置更新模式“改写”表示在点击“恢复出厂设置”或更新BMC后,选定的项目将被覆盖为默认值。“保留”表示在点击“恢复出厂设置”或更新BMC后,选定的项IPMI,PEF数据、SOL数据、IPMI用户信息、SMTP、DCMIIPMIIPMIIPMIIPMIIPMIIPMIBMCKVM和虚拟媒体设备认证,包括LADPSerialOverLAN(SOLSerialOverLAN(SOL)将系统串口重定向到远程网络客户端。用户通过本地PCBMCIPMI(solactivate)打开串口重定向功能,查看系COM0COM1SOL。COM0COM1默认在COM0启用SOL(COM1),BIOS(串BIOSSOLBMC设置BMC设置LPCSOLBMC可以记录系统的串口信息。BIOS或OS发送到串口的日志将被记录到BMC的DDR中,并最多保存2M字节的系统串行日志。当超过2M时,日志将循环控制台重定向远程KVM通过BMC将主机系统的控制台重定向到用户PC,用户登录BMCKVMHTML5BMCHTML5KVMHTML5KVMChrome58版本、IE11,HTML5KVMJAVA,.NET。“LaunchKVMHTML5Viewer”HTML5KVM。KVMBMC设置BMC设置JavaJRE“LaunchKVMJavaViewer”启JavaKVM。JavaKVM支持网络断开后重新连接,默认重试次数为3,重试时间间隔为10s。用户可以16,时530KVMKVMKVMWind
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2024年度版权交易合同with防篡改与维权条款3篇
- 大额财产抵押借款协议
- 全国青岛版信息技术八年级下册第2单元第2课《自我介绍》教学实录
- 2024-2025学年高中物理 第1章 3 运动快慢与方向的描述-速度教学实录 教科版必修1
- 2024年双方共建跨境电商物流服务合资企业协议书3篇
- 单位个人租赁合同
- 《敬业与乐业》教学实录-2024-2025学年九年级语文上册同步特色备课资源(统编版)
- 2024年短期办公设备租赁合同范本
- 2024年度制药行业实验室耗材采购与质量检测合同3篇
- 2024版保安行业安全防范技术研发聘用合同
- 微观经济学智慧树知到答案章节测试2023年山东大学(威海)
- 桥梁工程智慧树知到答案章节测试2023年广州大学
- 科学认识天气智慧树知到答案章节测试2023年中国海洋大学
- 家居风格分类说明PPT讲座
- 高标准农田施工合同
- J.P. 摩根-全球电气设备行业-自动化产业:摩根大通系统集成商调查-2021.5.20-58正式版
- GB/T 28035-2011软件系统验收规范
- 介绍北京英文
- 医生、护士工作服技术参数要求
- GB 29518-2013柴油发动机氮氧化物还原剂尿素水溶液(AUS 32)
- 《经济学基础》试题库(附答案)
评论
0/150
提交评论