云存储系统部署手册

1、云存储部署使用说明书V1.0.0前言概述本文档主要介绍了大华云存储的部署步骤，仅供大华内部研发人员、技术支持人员参考。符号约定在本文档中可能出现下列标志，它们所代表的含义如下。符号说明表示有高度潜在危险，如果不能避免，会导致人员伤亡或严重伤害。表示有中度或低度潜在危险，如果不能避免，可能导致人员轻微或中等伤害。表示有潜在风险，如果忽视这些文本，可能导致设备损坏、数据丢失、设备性能降低或不可预知的结果。表示静电敏感的设备。表示高压危险。表示强激光辐射。表示能帮助您解决某个问题或节省您的时间。表示是正文的附加信息，是对正文的强调和补充。Error! No text of specified sty

2、le in document. III重要安全须知下面是关于产品的正确使用方法、为预防危险、防止财产受到损失等内容，使用设备前请仔细阅读本说明书并在使用时严格遵守，阅读后请妥善保存说明书。l 请在设备布控后及时修改用户的默认密码，以免被人盗用。l 请勿将设备放置和安装在阳光直射的地方或发热设备附近。l 请勿将设备安装在潮湿、有灰尘或煤烟的场所。l 请保持设备的水平安装，或将设备安装在稳定场所，注意防止本产品坠落。l 请勿将液体滴到或溅到设备上，并确保设备上没有放置装满液体的物品，防止液体流入设备。l 请将设备安装在通风良好的场所，切勿堵塞设备的通风口。l 仅可在额定输入输出范围内使用设备。l

3、请勿随意拆卸设备。l 请在允许的湿度和温度范围内运输、使用和存储设备。l 请务必按照要求使用电池，否则可能导致电池起火、爆炸或燃烧的危险！l 更换电池时只能使用同样类型的电池！l 产品必须使用本地区推荐使用的电线组件（电源线），并在其额定规格内使用！l 请务必使用设备标配的电源适配器，否则引起的人员伤害或设备损害由使用方自己承担。l 请使用满足SELV（安全超低电压）要求的电源，并按照IEC60950-1符合Limited Power Source（受限制电源）的额定电压供电，具体供电要求以设备标签为准。l 请将I类结构的产品连接到带保护接地连接的电网电源输出插座上。l 器具耦合器为断开装置，

4、正常使用时请保持方便操作的角度。特别声明l 产品请以实物为准，说明书仅供参考。l 说明书将根据产品的变化定期更新，更新的内容将会在本手册的新版本中加入，恕不另行通知。产品部分功能在更新前后可能存在细微差异。l 最新程序及补充说明文档敬请与公司客服部联系。l 说明书供多个型号产品做参考，每个产品的具体操作不一一例举，请用户根据实际产品自行对照操作。l 说明书可能包含技术上不准确的地方、或与产品功能及操作不相符的地方、或印刷错误，以公司最终解释为准。l 如不按照说明书中的指导进行操作，因此而造成的任何损失由使用方自己承担。l 在本文档中可能提及的其他商标或公司的名称，由其各自所有者拥有。目录前言I

5、重要安全须知II1 系统概述11.1 系统介绍11.2 服务器介绍12 系统部署22.1 云转存方案部署22.1.1 部署前准备22.1.2 部署MDS52.1.3 部署Datanode92.1.4 运维界面添加节点102.1.5 流媒体服务配置112.1.6 时间同步配置162.2 云直存方案部署162.2.1 部署前准备162.2.2 部署MDS192.2.3 部署Datanode232.2.4 升级安装DSS242.2.5 流媒体服务配置262.2.6 时间同步配置303 部署验证313.1 验证准备313.2 登录云存储运维314 系统升级344.1 升级准备344.2 一键升级344

6、.3 模块升级395 常见问题处理425.1 部署常见问题425.2 常见交换机配置方法435.2.1 概述435.2.2 华为S5700-52C-SI435.2.3 华三S5560-54C-EI475.2.4 锐捷S5510-48GT/4SFP-E53附录1 错误码59附录1.1 云存储错误码59附录1.2 DSS错误码64目录 IV1 系统概述1.1 系统介绍云储存系统解决了城市级海量视频数据存储和检索难题，以视频、图片文件存储和管理为核心，可面向大规模数据密集型应用。云存储系统以网络智能存储为载体，通用的X86架构应用服务器为元数据管理服务器，来实现存储节点能够根据业务需要扩容，存储节点

7、间容错等高级特性，具有高性能、高容错、高可用的特点。1.2 服务器介绍MDS(Meta-data Service)MDS即大华云存储元数据服务器，常用型号有CSS9032、CSS9064。MDS主要负责元数据的存储和管理。集群中MDS的数量为两台，互为主备。图1-1 MDSDatanodeDatanode即大华云存储数据节点，常用型号有CSS3116、CSS7024、CSS7124、CSS7148。Datanode主要负责数据的存储。集群中Datanode的数量依据现场规划的存储规模而定。图1-2 DatanodeError! No text of specified style in doc

8、ument. 612 系统部署云存储系统部署可分为云直存和云转存两种方式，用户可根据不同的方案需求进行选择。由于操作界面随着功能的增加、版本的迭代而修改，本文中的截图可能与实际中的不符，请以实际为准。2.1 云转存方案部署2.1.1 部署前准备Windows机器一台（要求可以和云存储集群连接到一个交换机上，建议使用笔记本电脑）。需要安装的软件如下所示：l Chrome浏览器l 大华IP Installer工具l xshell或CRT等终端工具 云转存组网云转存按不同的组网方式可分为堆叠、不堆叠、直连核心三种方式，如下图所示。图2-1图2-2图2- 网络规划设备默认

9、心跳IP为、，重新分配的IP不能与默认的心跳IP同网段。部署时，需要提前进行IP规划，本文部署以下表为例。表2-1 云转存IP规划参数名称示例MDS虚IP01CS虚IP02MDS1实IP00MDS2实IP03Datanode1实IP92Datanode2实IP9 交换机配置堆叠根据项目规划的组网图，确定是否采用堆叠模式，选择堆叠模式需要对交换机做堆叠配置，因交换机型号众多在此不展开，常用型号可参考本文档中

10、“常见交换机配置方法”章节。端口绑定无论是否采用堆叠模式，都需要对交换机相应的端口做绑定。各服务器需要绑定的端口数如下表所示，常用交换机型号绑定操作可参考本文档中“常见交换机配置方法”章节。表2-2 交换机配置服务器交换机需要绑定端口数主MDS2备MDS2每个数据节点Datanode42.1.2 部署MDS MDS接线步骤1 为两台MDS接上电源线并开机。步骤2 为两台MDS接好网线。MDS总共有4个网卡（eth0、eth1、eth2、eth3），正常情况下，网卡编号顺序是和物理网口的位置顺序是一致的。l eth0和eth1是MDS的心跳网口，即第1、2两个网口，将这两个网口分别

11、直连到另外一台MDS对应的网口。l eth2和eth3是MDS业务网口，即第3、4两个网口，将这两个网口连接到存储交换机上。 修改两台MDS的实IP步骤1 将笔记本网线连接到和MDS同网交换机上。步骤2 将笔记本添加一个和MDS同一网段的IP，如50，选择“本地连接 > 属性 > Internet协议版本4（TCP/IP4）> 高级 > 添加”，添加IP和网关，如下图所示。图2-6步骤3 打开IP Installer工具，单击刷新按钮发现所有支持IP Installer的待配置服务器。图2-7步骤4 找到待配置IP的两个MDS，双击查

12、看具体IP的配置信息（没有修改过的MDS IP均为10）。图2-8步骤5 弹出框中的IP配置为规划好的MDS实IP，用户名、密码、端口，请输入为：admin、888888888888(12个8)、37777。步骤6 单击“修改”。l 如果修改失败，请单击刷新，若发现IP已经修改成功，进行下一步骤，若未修改成功，请检查用户名和密码。l 如果修改成功，请单击刷新，可以看到修改后的结果。步骤7 配置成功后，按以上步骤配置另外一台MDS。 配置MDS和CS的虚IP步骤1 以admin帐户（默认密码为admin）登录其中任意一台元数据服务器的IP配置界面，如用chro

13、me浏览器打开地址“00/EFS/Install.html”，其中“00”为实IP。输入网址时，请注意字母大小写。图2-9步骤2 在上述界面中，输入相应的IP地址。表2-3输入框提示IP地址本地IP系统自动设置的MDS实IP，请勿修改对端IP输入另外一台MDS实IPMDS虚拟IP管理平台访问地址CS虚拟IP客户端访问云存储地址步骤3 配置完成后单击确定，稍等片刻就配置成功，至此两台元数据服务器都已经配置完成。图2-10 安装过程图2-11 安装结束2.1.3 部署Datanode Datanode接线步骤1 机架上的Datanode全部

14、接上电源并开机。步骤2 Datanode先接一台机器的网线到交换机。Datanode四个网口是绑定一起的，需要将四个网口连接到交换机上已经绑定的四个对应端口。 修改Datanode实IP步骤1 将笔记本连接到和datanode同网的交换机上。步骤2 打开IP Installer工具，单击刷新按钮发现所有支持IP Installer的待配置服务器。步骤3 找到待配置IP的Datanode，双击查看具体IP的配置信息（没有修改过的Datanode IP均为11）。图2-12步骤4 弹出框中的用户名、密码、端口，请输入为：admin、888888888888(12

15、个8)、37777，单击“修改”。l 如果修改失败，请检查输入的用户名密码。l 如果修改成功，请单击刷新，可以看到修改后的结果。步骤5 接着重复“Datanode接线”和“修改Datanode实IP”步骤，配置下一台Datanode。2.1.4 运维界面添加节点配置完所有Datanode的实IP后，需要将Datanode添加到集群中。步骤1 打开云存储运维界面：MDS虚IP/EFS，如01/EFS，以admin帐户（默认密码为admin）登录。步骤2 选择“存储节点”菜单栏。并单击“节点添加”按钮，弹出如下窗口。图2-13步骤3 在窗口中输入已经配置好的Datanode实

16、IP并单击确定。这样节点就被加到集群中来了。步骤4 接着将剩余Datanode逐台添加上来。2.1.5 流媒体服务配置云转存方案中，云存储和DSS平台是两块独立的模块，DSS平台部署、升级等步骤不在此展开，此处仅针对DSS平台中的云存储配置提供示例。目前可以和云存储对接的平台有：DSS-B平台、DSS-C平台，以下配置方式按平台类型进行区分。.1 DSS-B平台步骤1 提前部署、升级好DSS平台。步骤2 打开其中任意一台流媒体服务器页面：DSS IP/config，如05/config，以用户名admin（默认密码123456）登录。图2-14步骤3 第一次

17、登录时会提示修改默认登录密码，为了保障您的设备安全，请及时修改密码。步骤4 进入“服务配置 > 存储服务（SS）”。1. 将模式类型修改成云存储模式。2. 填写SS配置。SS配置中目录服务器地址就是CS地址，本示例中为02，端口、用户名、密码为38100、root、123456，N+M模式请按照实际需求填写。3. 填写云直存配置。本例为转存模式，该处配置用不到，但是“MDS地址”项默认为“”，不修改无法保存配置，因此此处只单独改“MDS地址”项为实际MDSIP即可，如01。4. 单击“应用”保存配置。图2-15步骤5 接着重复以上

18、的步骤，配置其余的流媒体服务器（包括CMS）。.2 DSS-C平台步骤1 提前部署、升级好DSS平台。步骤2 在浏览器输入DSS中心服务器（CMS）IP地址，打开Web登录界面，选择“管理员”，用户名密码分别是： system 123456。图2-16步骤3 登录后进入“系统设置 > 文件管理”界面，单击右边的“配置工具下载”，下载DSS-C配置工具并安装。图2-17步骤4 安装完成后运行DSS-C配置工具。步骤5 对于每一台流媒体转发服务器（包括CMS、MTS），都需要分别用DSS-C配置工具登录上去，配置云存储模式。如果不知道MTS服务器地址，可以参考步骤2登录DSS

19、web界面，进入“基本设置 > 服务器设置 > 视频服务器”界面查看使用中的服务器IP。图2-18步骤6 DSS-C配置工具启动界面填写其中一台流媒体服务器（MTS）的IP地址，端口号默认9093，单击登录按钮。图2-19步骤7 把SS、PTS存储模式设为云存储。1. 登录DSS-C配置工具后，点左侧的“磁盘配置(Disk)”页签，然后在“SS”存储类型下拉框上选择“云存储”。2. 在“SS云存储配置”页签上填写云存储配置项：表2-4参数说明IP地址填写云存储目录服务器IP，即CS IP，如172. 5.112.202端口38100用户名root密码123456数据冗余模式若云存储

20、服务已经正常运行，单击“获取冗余模式”，下拉列表中会拉出几种云存储默认支持的N+M模式。N+M的选择请根据项目的预期规划进行选择。3. 选择PTS存储存储类型为“云存储”。下方的PTS云存储配置细节与SS云存储配置一致。4. 配置完SS和PTS后，单击右下角保存按钮，根据系统提示重启服务。图2-20图2-21步骤8 接着重复以上的步骤，配置其余的流媒体服务器（包括CMS）。2.1.6 时间同步配置系统中必须保证云存储和平台间时间同步。平台CMS需部署和开启NTP服务，保证所有设备、服务间时间同步，否则有可能引起录像查询、回放的异常，比如时间跳变，录像混乱。步骤1 检查cms和mds的时间差，使

21、用data s “时间”，强制修改系统时间（若有备机，同样需要修改），必须使得双方时间差在30分钟之内，否则ntpd无法生效。步骤2 登入CMS后台，执行命令：netstat -tunlp | grep ntpd，查看123端口是否被ntpd服务占用监听。若显示如下信息，说明ntpd服务已经正常启动。步骤3 若步骤2中ntpd服务未正常启动，登陆CMS的后台，修改/etc/ntp.conf文件中的下面两行：#server # local clock#fudge stratum 10修改为：  server 127.127.1.

22、0 # local clockfudge stratum 10即去掉注释。CMS机器执行service ntpd start,启动ntpd服务。CMS机器执行chkconfig ntpd on,使ntpd服务开机启动。检查123端口是否处于监听状态，netstat tunlp | grep ntpd步骤4 确保CMS的ntpd服务正常启动后，在云存储运维界面，配置NTP IP保证后续时间同步。NTP IP的填法：若CMS双机热备，填CMS虚IP，若为单台CMS，填单台CMS实IP。步骤5 校验配置是否生效：MDS机器执行命令cat /etc/ntp/step-ticke

23、rs显示出来的ip看是否为在运维界面配置的NTP IP。步骤6 检验NTP是否生效：执行ntpq p查看ntp服务器与上层ntp服务器的状态。#其中：#remote - 本机和上层ntp的ip或主机名，“+”表示优先，“*”表示次优先#refid - 参考上一层ntp主机地址#st- stratum阶层#when- 多少秒前曾经同步过时间#poll- 下次更新在多少秒后#reach- 已经向上层ntp服务器要求更新的次数#delay- 网络延迟#offset- 时间补偿#jitter- 系统时间与bios时间差 执行ntpstat，查看无和上层连同。ntpstat结果可能需要5分钟左右的时间才

24、能出来。执行date命令查看实际时间同步情况。注：若CMS为双机热备，需要对CMS的所有主备机都执行上述步骤1、2、3这3步操作。2.2 云直存方案部署2.2.1 部署前准备Windows机器一台（要求可以和云存储集群连接到一个交换机上，建议使用笔记本电脑）。需要安装的软件如下所示：l Chrome浏览器l 大华IP Installer工具l xshell或CRT等终端工具 云直存组网云直存集群组网图，此处以8个千兆网口的数据节点为例，4个网口接存储交换机，另外4个网口接业务交换机，现场部署请以实际情况为准。图2-22图2- 网络规划l 设备默认心跳IP为192

25、.168.1.2、，重新分配的IP不能与默认的心跳IP同网段。l 云直存方案中分配的存储IP不能与业务IP同网段。部署时，需要提前进行IP规划，本文部署以下表为例。表2-5 云直存IP规划参数名称示例MDS虚IP01CS虚IP02MDS1实IP00MDS2实IP03Datanode1实IPl 存储IP:92l 业务IP:92Datanode2实IPl 存储IP:93l 业务IP: 932.2.1

26、.3 交换机配置端口绑定各服务器需要绑定的端口数如下表所示。每个数据节点对应需要绑定的交换机端口数需根据实际网络规划进行绑定，本例中每台Datanode需要接8个交换机口，4个网口给业务IP，4个网口给存储IP，因此需要分别对存储交换机4个网口做绑定，业务交换机4个网口做绑定。常用交换机型号绑定操作可参考本文档中“常见交换机配置方法”章节。表2-6 交换机配置（云直存）服务器交换机需要绑定端口数主MDS2备MDS2每个数据节点Datanode按网络规划绑定2.2.2 部署MDS MDS接线步骤1 为两台MDS接上电源线并开机。步骤2 为两台MDS接好网线。MDS总共有4个网卡（e

27、th0、eth1、eth2、eth3），正常情况下，网卡编号顺序是和物理网口的位置顺序是一致的。l eth0和eth1是MDS的心跳网口，即第1、2两个网口，将这两个网口分别直连到另外一台MDS对应的网口。l eth2和eth3是MDS业务网口，即第3、4两个网口，将这两个网口连接到存储交换机上。 修改两台MDS的实IP步骤1 将笔记本网线连接到和MDS同网交换机上。步骤2 将笔记本添加一个和MDS同一网段的IP，如50，选择“本地连接 > 属性 > Internet协议版本4（TCP/IP4）> 高级 > 添加”，添加IP和网关，如

28、下图所示。图2-26步骤3 打开IP Installer工具，单击刷新按钮发现所有支持IP Installer的待配置服务器。图2-27步骤4 找到待配置IP的两个MDS，双击查看具体IP的配置信息（没有修改过的MDS IP均为10）。图2-28步骤5 弹出框中的IP配置为规划好的MDS实IP，用户名、密码、端口，请输入为：admin、888888888888(12个8)、37777。步骤6 单击“修改”。l 如果修改失败，请单击刷新，若发现IP已经修改成功，进行下一步骤，若未修改成功，请检查用户名和密码。l 如果修改成功，请单击刷新，可以看到修改后的结果。步骤7 配置成

29、功后，按以上步骤配置另外一台MDS。 配置MDS和CS的虚IP步骤1 以admin帐户（默认密码为admin）登录其中任意一台元数据服务器的IP配置界面，如用chrome浏览器打开地址“00/EFS/Install.html”，其中“00”为实IP。输入网址时，请注意字母大小写。图2-29步骤2 在上述界面中，输入相应的IP地址。表2-7输入框提示IP地址本地IP系统自动设置的MDS实IP，请勿修改对端IP输入另外一台MDS实IPMDS虚拟IP管理平台访问地址CS虚拟IP客户端访问云存储地址步骤3 配置完成后单击确定，稍等片刻就配置成功

30、，至此两台元数据服务器都已经配置完成。图2-30 安装过程图2-31 安装结束2.2.3 部署Datanode Datanode接线步骤1 机架上的Datanode全部接上电源并开机。步骤2 Datanode先接一台机器的网线到交换机。Datanode第1、2、3、4网卡和5、6、7、8网卡是分别绑定的，此处需要将1、2、3、4网口连接到云存储交换机上，5、6、7、8连接到业务交换机上。 修改Datanode实IP步骤1 将笔记本连接到和datanode同网的云存储交换机上。步骤2 打开IP Installer工具，单击刷新按钮发现所有支持IP Installer的

31、待配置服务器。步骤3 找到待配置IP的Datanode，双击查看具体IP的配置信息（没有修改过的Datanode IP均为11）。图2-32步骤4 弹出框中的用户名、密码、端口，请输入为：admin、888888888888（12个8）、37777，单击“修改”。l 如果修改失败，请检查输入的用户名密码。l 如果修改成功，请单击刷新，可以看到修改后的结果。步骤5 接着重复“Datanode接线”和“修改Datanode实IP”步骤，配置下一台Datanode。2.2.4 升级安装DSS直存Datanode设备默认出厂时只是装了一个DSS的升级程序：upgrade-serv

32、er，还需要通过DSS配置工具，以升级安装的方式安装DSS服务。步骤1 在Windows机器上安装DSS的ConfigTool。如果已经安装，可以直接使用。ConfigTool可以从DSS的CMS管理界面下载：用浏览器输入 CMS IP 并回车，以system用户（默认密码123456）登录，然后切换到“系统配置 > 文件管理”界面，单击“配置工具下载”按钮。图2-33步骤2 打开，单击“登录”按钮。图2-34步骤3 在弹出的登录对话框中，输入之前配置的Datanode IP，然后单击“登录”。图2-35步骤4 登录成功后，在“系统升级”页签上，单击“打开”按钮，选择本地机器上的DSS安

33、装文件，然后单击“升级”按钮，几分钟后即可完成升级。图2-362.2.5 流媒体服务配置云直存方案中，流媒体服务是运行在每台Datanode上的，配置流程如下：步骤1 打开流媒体服务配置页面：DatanodeIP/Config，如92/Config，以用户名admin（默认密码123456）登录。图2-37步骤2 第一次登录时会提示修改默认登录密码，为了保障您的设备安全，请及时修改密码。图2-38步骤3 首先进入“系统维护 > 网卡配置”页面进行网卡配置。示例中，业务网络使用网卡1和网卡2组成的绑定网卡1，存储网络使用网卡3和网卡4的绑定网卡2。在实际部署中请严格按

34、照网络规划中的设计进行配置。正式发布的直存7124系列硬件，一般有8网卡和6网卡两种：l 7124X-10GESD/7124X-10GERD有4个千兆网口和2个万兆光口。一般将4个千兆口绑定用作平台服务，2个万兆光口绑定用作云存储服务；l 7124X-ESD/7124X-ERD 有8个千兆网口，一般把4个绑定用作平台服务，另4个绑定用作云存储服务。1. 选择“系统维护 > 网卡配置”。2. 网卡模式选择高级绑定。3. 单击添加绑定网卡，在对应的绑定网卡右边选择需要绑定的网卡。4. 网卡绑定完成后，将默认网卡选择到走业务网络的网卡。5. 根据网络规划时的设计，修改网卡的IP地址、子网掩码、

35、默认网关。6. 配置完成单击应用，确认后，设备会重启。图2-39步骤4 设备重启完成后，重新打开流媒体服务配置页面，并登录进入“服务配置 > 存储服务（SS）”。1. 将模式类型修改成云存储模式2. 填写SS配置。SS配置中目录服务器地址就是CS地址，本示例中为02，端口、用户名、密码为38100、root、123456，N+M模式请按照实际需求填写。3. 填写云直存配置。存储节点地址为Datanode的存储网段地址。恢复流控最大带宽请按照实际网络带宽填写，一般建议单根千兆线填64M，多根则倍增。4. 应用后保存。图2-40步骤5 进入系统维护，将选择从模式运行。图

36、2-411. 主从模式切换需要密码确认，如果在第一步中修改过登录密码，请按实际的填写。2. 输入主控服务IP，就是平台CMS的IP地址。本示例中为023. 勾选清除数据库。4. 确认后待设备重启完成。图2-42步骤6 接着重复以上的步骤，配置其余的Datanode节点。2.2.6 时间同步配置系统中必须保证云存储和平台间时间同步。平台CMS需部署和开启NTP服务，保证所有设备、服务间时间同步，否则有可能引起录像查询、回放的异常，比如时间跳变，录像混乱。步骤1 检查cms和mds的时间差，使用data s “时间”，强制修改系统时间（若有备机，同样需要修改），必须使得双方

37、时间差在30分钟之内，否则ntpd无法生效。步骤2 登入CMS后台，执行命令：netstat -tunlp | grep ntpd，查看123端口是否被ntpd服务占用监听。若显示如下信息，说明ntpd服务已经正常启动。步骤3 若步骤2中ntpd服务未正常启动，登陆CMS的后台，修改/etc/ntp.conf文件中的下面两行：#server # local clock#fudge stratum 10修改为：  server # local clockfudge stratum

38、10即去掉注释。CMS机器执行service ntpd start,启动ntpd服务。CMS机器执行chkconfig ntpd on,使ntpd服务开机启动。检查123端口是否处于监听状态，netstat tunlp | grep ntpd步骤4 确保CMS的ntpd服务正常启动后，在云存储运维界面，配置NTP IP保证后续时间同步。NTP IP的填法：若CMS双机热备，填CMS虚IP，若为单台CMS，填单台CMS实IP。步骤5 校验配置是否生效：MDS机器执行命令cat /etc/ntp/step-tickers显示出来的ip看是否为在运维界面配置的NTP IP。步骤6 检验NTP是否生效

39、：执行ntpq p查看ntp服务器与上层ntp服务器的状态。#其中：#remote - 本机和上层ntp的ip或主机名，“+”表示优先，“*”表示次优先#refid - 参考上一层ntp主机地址#st- stratum阶层#when- 多少秒前曾经同步过时间#poll- 下次更新在多少秒后#reach- 已经向上层ntp服务器要求更新的次数#delay- 网络延迟#offset- 时间补偿#jitter- 系统时间与bios时间差 执行ntpstat，查看无和上层连同。ntpstat结果可能需要5分钟左右的时间才能出来。执行date命令查看实际时间同步情况。注：若CMS为双机热备，需要对CMS

40、的所有主备机都执行上述步骤1、2、3这3步操作。3 部署验证3.1 验证准备Windows机器一台（要求可以和云存储集群连接到一个交换机上，建议用笔记本）。需要安装的软件如下：l Chrome浏览器l 大华IP Installer工具l xshell或CRT等终端工具3.2 登录云存储运维步骤1 使用Chrome浏览器，地址栏输入地址：MDS虚IP/EFS，例如“01/EFS”。图3-1步骤2 以admin帐户（默认密码为admin）登录，云存储运维首页如下图所示。检查“概况”页面中的每个面板，对比下图，是否有异常情况。图3-2步骤3 单击“存储节点”，查看Datanod

41、e状况。查看Datanode数量是否合预期，查看Datanode容量是否合预期。图3-3步骤4 双击存储节点的IP地址，显示如下界面。磁盘绿色代表在线盘，灰色代表空槽位，对比实际磁盘数量是否合预期。图3-44 系统升级4.1 升级准备获取软件包获取升级包，升级包名的格式为：“DH_EFS_Eng_PS_版本号_日期”，如“DH_EFS_Eng_PS_V1.043.0000.0.T.150411.tar”，其中V1.043.0000.0.T表示了系统所要升级的版本号，150411为打包时间即2015年4月11号。检查环境以admin帐户（默认密码为admin）登入到云存储的运维平台，即用chro

42、me浏览器打开网址： 01/EFS （其中01为MDS虚拟IP）， 登录成功后检查当前系统的运行状态，详见检测部分。风险点l 在升级前建议暂停上层业务，否则会有部分数据丢失。l 若使用环境为元数据主备双机环境，请确保双机在线，否则会造成升级过程不完全。使用场景l 对整个系统进行升级，请查看一键升级介绍。l 若由于某些特殊原因，需要对某个模块单独进行升级，请查看模块升级介绍。4.2 一键升级一键升级指的是选定升级包以后，系统自动升级所有的服务模块。步骤1 在“概况”页面可以看到当前系统的版本号，如图所示。图4-1确定当前的版本号以及升级包的

43、版本号，如果一致可以不用进行升级。步骤2 用户跳转至系统管理页面，如图所示。图4-2步骤3 单击“升级”按钮，会通知输入操作密码（默认为admin），如图所示：图4-3步骤4 单击“浏览按钮”，选择升级包 图4-4本文以此升级包为例：DH_EFS_Eng_PS_V1.042.0000.2.T.150402.tar。图4-5步骤5 选择提交后系统就会自动的给各个模块进行升级，页面会不断提示当前的进度，如下图所示。图4-6图4-7步骤6 升级成功后，提示“系统升级成功，请刷新浏览器”，到此系统的升级过程结束。重新登录平台，在“概况”页面查看系统最新版本号。异常处理若升级过程出现问题，平台会给出失败

44、原因，如下图所示。出现以下错误信息时，请联系技术支持人员。图4-84.3 模块升级模块升级是指对各服务模块单独进行升级。服务模块有元数据服务器、目录服务器、运维平台、存储服务器。本文以升级运维平台为例，可按照以下步骤可以升级元数据服务器，目录服务器及存储服务器。步骤1 解压DH_EFS_Eng_PS_V1.043.0000.0.T.150411.tar升级包获取各个服务模块的升级包。l 其中元数据服务器的升级包名为：mds.tar.bz2； 目录服务器的升级包名为：cs.tar.bz2。l 32位操作系统的存储节点升级包名为：dn_bin_upgrade_32bit.tar；64位操作系统的存

45、储节点升级包名为dn_bin_upgrade_64bit.tar。步骤2 用户以管理员身份登录，跳转至“系统管理”页面，各个服务模块以表格的形式展示在页面下方，如图所示。图4-9步骤3 以升级运维平台为例：单击表格中操作一栏中的第二个按钮，即，然后根据提示选择运维平台的升级包即Manager_upgrade.tar。图4-10步骤4 提交后升级开始。图4-11l 出现如下提示，表示升级成功。图4-12l 如果升级失败，页面会提示：“XXX升级失败”，升级失败后请联系技术支持人员。5 常见问题处理5.1 部署常见问题IP Installer工具无法搜索到MDS IP步骤1 检查配置用的笔记本网线

46、是否正常连接到交换机，网口是否亮起。步骤2 检查MDS业务口（eth2,eth3）网线是否已经正常连接到交换机，网口是否亮起。步骤3 若1、2都正常，怀疑出厂设备网卡排列与eth0/eth1/eth2/eth3顺序不一致。请对调MDS心跳口和业务口。MDS将eth0、eth1作为心跳口，eth2、eth3作为业务口。设备网卡排列顺序有两种：1、eth0/eth1/eth2/eth3；2、eth2/eth3/eth0/eth1。出厂默认是第一种。运维界面打开异常步骤1 检查运维地址输入的IP是否是“MDS虚IP/EFS”。使用CS虚IP或MDS任何一台实IP作为运维地址都是错误的。步骤2 检查使

47、用的浏览器是否是chrome浏览器，目前对IE等其他浏览器不能很好的支持。运维界面MDS有一台离线步骤1 查看运维界面Datanode上线个数，大于等于2台Datanode上线后，MDS才会自动上线，系统才能正常工作。步骤2 检查MDS网线连接是否正常，网口是否正常闪烁。运维界面Datanode容量显示为0Datanode起来后需要等待容量上报，稍等30s左右后，正常情况下即可显示容量值。云存储无法写入步骤1 运维界面检查MDS、Datanode状态是否异常。步骤2 检查写入方式选择的N+M模式，默认支持4+1、8+2、3+2、1+1、1+2、1+3、1+4。步骤3 检查写入方式选择的N+M模

48、式，N+M个数必须小于等于运维界面看到的Datanode节点个数。无法访问流媒体服务配置页面：DatanodeIP/config步骤1 流媒体服务器的启动比较缓慢，需要稍等片刻，重新访问。短时间内不能访问该页面，不能确认是服务出现问题。步骤2 在Windows机器上同时按住“win键 + r”，弹出运行窗口后，输入“ping DatanodeIP”检查网络是否畅通。l 如果有类似以下提示，则表示网络连接正常。“来自 51 的回复: 字节=32 时间<1ms TTL=63”l 如果ping不通，请检查网络连接情况。5.2 常见交换机配置方法5.2.1 概述本文主要针对目

49、前我们推荐的交换机（华为S5700-52C-SI、华三S5560-54C-EI、锐捷S5510-48GT/4SFP-E）的配置做些介绍，方便相关人员查阅。不同品牌型号的交换机的配置方法会有所不同，如果您使用的是其他品牌型号的交换机，请到相应厂家的官方网站下载配置文档：l 华三：l 华为：l 锐捷：交换机配置完毕之后，请关闭已经开启的登录方式，防止非法入侵。5.2.2 华为S5700-52C-SI 登录方式串口使用串口线，连接主机COM口和交换机console口：图5-1使用模拟终端（Xshell或SecureCRT），选择serial协议建立连接。串口登录无需帐户。协议参数缺省情

50、况如下：表5-1属性缺省配置协议Serial传输速率9600数据位8停止位1奇偶校验无流量控制无TELNET先使用串口登录，使用串口登录后使用下列命令打开telnet服务：<HUAWEI> system-view #从用户视图进入系统视图HUAWEI telnet server enable #开启telnet服务配置帐户和权限HUAWEI user-interface vty 0 7HUAWEI-ui-vty0-7 authentication-mode aaaHUAWEI-ui-vty0-7 quitHUAWEI aaaHUAWEI local-user admin123 pa

51、ssword irreversible-cipher admin123 #配置用户名为admin123，密码为admin123HUAWEI-aaa local-user admin123 service-type telnetHUAWEI-aaa local-user admin123 privilege level 3HUAWEI-aaa quit<HUAWEI> save #保存telet服务开启后，在主机使用模拟终端即可与交换机建立telnet连接。为了网络安全，交换机业务配置完成后，请关闭该服务：<HUAWEI> system-view#从用户视图进入系统视图H

52、UAWEI undo telnet server enable#关闭telnet服务WEBweb服务默认关闭，使用串口登录后使用下列命令打开web服务：<HUAWEI> system-view#从用户视图进入系统视图HUAWEI http secure-server enable#开启https服务HUAWEI http server enable#开启http服务配置帐户和权限HUAWEI aaaHUAWEI-aaa local-user admin123 password irreversible-cipher admin123 #配置用户名为admin123，密码为admin

53、123HUAWEI-aaa local-user admin123 service-type httpHUAWEI-aaa local-user admin123 privilege level 15HUAWEI-aaa quit<HUAWEI> save # 保存web服务开启后，在主机使用IE浏览器，地址栏输入交换机的IP，即可打开交换机的配置页面。地址为交换机的IP。为了网络安全，交换机业务配置完成后，请关闭该服务：<HUAWEI> system-view#从用户视图进入系统视图HUAWEI undo http secure-server enable #关闭https服务HUAWEI undo http server enable #关闭http服务 IP配置IP地址只能在控制台上配置，无法在web页面进行。<HUAWEI> system-view#从用户视图进入系统视图HUAWEI interface vlanif 1 # 进入vlan 1HUAWEI-vlan1 ip address 50 # 设置IP和掩码HUAWEI-vlan1 quitHUAWEI ip route-static # 配置默认网关<H