H3CUniStorCD系列容灾产品安装手册

H3cUniStorCD系列容灾产品

安装手册

H3C

新华三技术有限公司

Copyright©2020新华三技术有限公司及其许可者所有，保留一切权利。

未经本公司书面许可，任何单位和个人不得擅自摘抄、复制本书内容的部分或全部，并不得以任何

形式传播。

除新华三技术有限公司的商标外，本手册中出现的其它公司的商标、产品标识及商品名称，由各自

权利人拥有。

由于产品版本升级或其他原因，本手册内容有可能变更。H3C保留在没有任何通知或者提示的情况

下对本手册的内容进行修改的权利。本手册仅作为使用指导，H3C尽全力在本手册中提供准确的信

息，但是H3C并不确保手册内容完全没有错误，本手册中的所有陈述、信息和建议也不构成任何

明示或暗示的担保。

新华三技术有限公司

士也址：浙江省杭州市滨江区长河路466号

网址：

客户服务邮箱：

客户服务电话：400-810-0504

前百

概述

本文档介绍H3CUniStorCD容灾产品安装指导。

读者对象

本文档适用于安装H3C产品工程师。

符号约定

本文档可能出现以下标志，他们所代表的含义如下。

符号说明

用于警示潜在的危险情形，若不避免，硬件设备可能会导致人员死

亡或严重的人身伤害，软件可能会导致系统文件损坏或丢失，无法

恢复。

用于警示潜在的危险情形，若不避免，硬件设备可能会导致中度或

轻微的人身伤害。软件可能会导致系统文件损坏或丢失，可恢复。

用于传递设备或环境安全警示信息，若不避免，可能会导致设备损

於本.

V坏、数据丢失、设备性能降低或其它不可预知的结果。

用于突出重要/关键信息、最佳实践和小窍门等。

说明

Q“说明”不是安全警示信息，不涉及文件丢失或损坏。

修改记录

修改记录累积了每次文档更新的说明。最新版本的文档包含之前所有文档版本的更新内

容。

修订日期版本说明

2020.06.02REV011.文档首次发布

2020.07.13REV021.新增安装数据库节点

1.修改升级i2Node节点

2020.08.14REV03

2.新增一体机安装的硬件配置要求

目录

1概述........................................................................................"4-

1.1产品介绍................................................................................-4-

1.2产品架构.................................................................................-5-

2一体机安装..................................................................................-6-

2.1OVlRT概述...............................................................................-6-

2.2硬件配置要求............................................................................-7-

2.3安装系统................................................................................-7-

2.4针对系统优化............................................................................-8-

2.5配置IP地址..............................................................................-9-

2.6配置HOSTNAME.................................................................................................................................................................................................................................-9-

2.7配置NTP同步...........................................................................-10-

2.8OVIRT-ENGINE的网络配置..................................................................-10-

2.9OVIRT-ENGINE的初始化.....................................................................-10-

2.10添力口第一个OVIRT-NODE节点...............................................................-11-

2.10.1修改Default数据中心..........................................................-11-

2.10.2修改Default集群.............................................................-12-

2.10.3创建主机.....................................................................-14-

2.10.4创建存储域...................................................................-18-

2.10.5上传操作系统ISO文件........................................................-20-

2.11添力口更多OVIRT-NODE节点................................................................-20-

2.11.1创建数据中心................................................................-21-

2.11.2创建集群....................................................................-21-

2.11.3创建主机....................................................................-23-

2.11.4创建存储域..................................................................-25-

2.11.5上传操作系统ISO文件.......................................................-25-

3软件安装...................................................................................-26-

3.1安装CONTROLCENTER控制机................................................................-26-

3.1.1软硬件环境要求...............................................................-26-

3.1.2Windows系统安装控制机......................................................-27-

3.1.3RHEL/CentOS安装控制机......................................................-27-

3.2安装NPSERVER....................................................................................................................................................-28-

3.2.1软硬件环境要求...............................................................-28-

3.2.2Windows系统安装NPServer..........................................................................................................-29-

3.2.3RHEL/CentOS系统安装NPServer.................................................................................................-30-

3.3安装I2NODEFORCDM节点..................................................................-30-

3.3.1软硬件环境要求................................................................-30-

3.3.2Windows系统安装i2NodeforCDM节点...........................................-31-

3.3.3RHEL/CentOS/SUSE安装i2NodeforCDM节点...................................-32-

3.3.4Ubuntu安装i2NodeforCDM节点...............................................-33-

3.4安装I2NODE节点.......................................................................-34-

3.4.1软硬件环境要求..............................................................-34-

3.4.2Windows安装i2Node节点.....................................................-35-

3.4.3RHEL/CentOS/SUSE系统安装i2Node节点.......................................-37-

3.4.4Ubuntu系统安装i2Node节点...................................................-38-

3.5安装ORACLE源机节点•本地部署...........................................................-38-

3.5.1软硬件环境要求...............................................................-38-

3.5.2Oracle11g源机节点•本地部署.................................................-39-

3.5.1Oracle12c源机节点•本地部署.................................................-46-

3.6安装ORACLE源机节点•分离部署...........................................................-54-

3.6.1Oracle源机节点•环境要求.....................................................-54-

3.6.2Oracle11g源机节点•数据库设置...............................................-54-

3.6.3Oracle12c源机节点•数据库设置...............................................-55-

3.6.4Oracle源机节点•启动服务.....................................................-57-

3.6.5Oracle分离节点•软硬件环境要求...............................................-58-

3.6.6Oracle分离节点•安装软件.....................................................-59-

3.6.7Oracle分离节点•环境配置.....................................................-59-

3.6.8Oracle分离节点•启动服务......................................................-60-

3.7安装ORACLE目标机节点...................................................................-63-

3.7.1Oracle目标节点•环境要求.....................................................-63-

3.7.2安装Oracle11g目标机节点.....................................................-64-

3.7.3安装Oracle12c目标机节点......................................................-70-

3.8安装KAFKA节点..........................................................................-76-

3.8.1软硬件环境要求...............................................................-76-

3.8.2Kafka节点•安装.............................................................-77-

3.8.3Kafka节点•环境配置........................................................-78-

3.8.4Kafka节点•启动服务........................................................-78-

3.8.5Kafka节点•创建主题........................................................-81-

4软件升级...................................................................................-82-

4.1升级控制机.............................................................................-82-

4.1.1Windows系统升级控制机.....................................................-82-

4.1.2RHEL/CentOS系统升级控制机.................................................-82-

4.2升级NPSERVER.........................................................................................................................................................-83-

4.2.1Windows系统升级NPServer...........................................................................................................-83-

4.2.2RHEL/CentOS系统升级NPServer..................................................................................................-83-

4.3升级I2NODE节点.........................................................................-83-

4.3.1Windows系统升级i2Node节点...................................................-83-

4.3.2RHEL/CentOS/SUSE系统升级i2Node节点........................................-84-

4.3.3Ubuntu系统升级i2Node节点...................................................-85-

4.1升级数据库节点..........................................................................-85-

4.1.1升级Oracle源机节点...........................................................-85-

4.1.1升级Oracle分离节点...........................................................-85-

4.1.2升级Oracle目标节点...........................................................-86-

4.1.3升级Kafka节点................................................................-86-

5软件卸载...................................................................................-87-

5.1卸载控制机..............................................................................-87-

5.1.1Windows系统卸载控制机.......................................................-87-

5.1.2RHEL/CentOS系统卸载控制机..................................................-87-

5.2卸载NPSERVER........................................................................................................................................................-87-

5.2.1Windows系统卸载NPServer.............................................................................................................-87-

5.2.2RHEL/CentOS系统卸载NPServer.................................................................................................-87-

5.3卸载I2NODE节点.........................................................................-88-

5.3.1Windows系统卸载i2Node节点..................................................-88-

5.3.2RHEL/CentOS/SUSE系统卸载i2Node节点.........................................-88-

5.3.3Ubuntu系统卸载i2Node节点.........................................................................................................-88-

5.4卸载数据库节点..........................................................................-89-

5.4.1卸载Oracle源机节点...........................................................-89-

5.4.2卸载Oracle分离节点...........................................................-89-

5.4.3卸载Oracle目标机节点.........................................................-90-

5.4.4卸载Kafka节点................................................................-90-

6统一管理平台................................................................................-92-

6.1概述....................................................................................-92-

6.2登录....................................................................................-92-

6.3总览....................................................................................-93-

概述

1.1产品介绍

H3CUniStorCD系列容灾产品是H3C全新推出的以副本数据管理作为基础功能，并提供

实时数据灾备、应用高可用、数据库同步功能等高级功能的一款一体化容灾产品。

副本数据管理

整机首次保护时将操作系统整个卷及数据卷以全量拷贝的方式同步到备份服务器上，备份

数据是虚拟磁盘格式的形式保存。后续每当生产环境对源主机数据或系统进行更改时，将

以块级粒度捕获变化数据保存到备份服务器上。基于虚拟磁盘格式自身的快照特性可以定

期对变化增量数据保存为快照，每当需要恢复时，通过备份服务器内置的虚拟化管理软件

创建并启动虚拟机，其对应虚拟磁盘就是备份数据的某个快照时间点的虚拟副本。用户可

直接访问虚拟机，在生产环境中实现应急接管、容灾演练等使用，在非生产环境中实现开

发、测试、分析等环境快速搭建。

实时数据灾备

基于字节级复制技术为用户提供企业级的连续数据备份、按需恢复服务，让用户能简便地

将各分节点的数据实时备份到本地或异地的灾备中心节点，并且按需快速地恢复需要的数

据。并严格保证生产系统和灾备中心数据的一致性和完整性。可广泛应用于普通文件系

统、数据库系统、邮件系统等实时的容灾备份保护。

应用高可用

基于字节级实时数据复制核心技术基础之上，提供本地应用高可用与异地容灾方案。针对

多种本地数据中心应用高可用性服务，当应用异常或生产系统出现异常（如服务异常停

止、网络异常、硬件故障、生产系统宕机维护）而导致应用业务系统不可用时，应用高可

用能将相关应用立刻切换到灾备服务器上，由灾备服务器上的应用提供服务，保证整体

业务的连续和不间断。针对异地数据中心提供主备应用级容灾高可用一键接管与切换。

数据库同步

基于数据库语言级的数据实时复制的技术，在数据库高并发事务场景下实现数据库全量同

步、增量同步，通过同步校验确保数据库源端和目标端的事务级最终一致性；同时提供备

库接管和增量回切等高级功能，帮助用户在复杂的应用环境下完成数据库的容灾备份、异

构数据迁移、数据分发、构建数据仓库等数据整合工作。

1.2产品架构

H3CUniStorCD容灾产品共分为4个主要模块：Node(节点模块)、NPServer模块、

ControlCenter(控制机模块)、oVirt容灾虚拟平台。

•Node：也称为节点模块。运行在生产节点用于捕获和发送复制数据；运行在灾备节点上

用于接收来自生产节点模块的复制数据，保存在灾备节点上。也包含了高可用的应用监测

和资源切换功能。

•NPServer：容灾虚拟平台的接口封装成指令进行发送，实现对虚拟机相关操作和管理。

•ControlCenter：也称为控制机，提供Web界面给用户实现节点、规则等配置和管理。

•oVirt：也称为容灾虚拟平台。集成在一体机中，由oVirt管理节点(oVirt-Engine)和oVirt

主机节点(oVirt-Node)组成的虚拟平台，分别负责管理虚拟机和运行虚拟机。

生产系统容灾系统

DiskO

一体机安装

2.1oVirt概述

只有对oVirt的一些主要概念有所了解，才能理解本文档所涉及的基于oVirt的虚拟化容灾

平台的设置。oVirt的主要概念如下：

名词说明

oVirt-Engine这是oVirt虚拟化平台的管理控制平台。它是虚拟化管理的控制

中心,API调用的中心。因此,oVirt-Engine非常重要，一旦Engine

不可用，整个虚拟化平台就无法使用。

oVirt-NodeoVirt虚拟化计算和存储节点。

数据中心数据中心是特定环境中使用的资源集的逻辑实体。数据中心被

(DataCenter)视为资源容器，它由计算资源（以群集和主机的形式）、网络

资源（以逻辑网络和物理NIC的形式）和存储资源（以存储域

的形式）组成。

一个数据中心可以包含多个群集，每个集群可以包含多个主机；

它可以有多个与之关联的存储域（StorageDomain）；它可以在

每个主机上创建多个虚拟机。。Virt环境可以包含多个数据中心。

所有数据中心都从单个管理门户进行管理。

存储域是指用于存储特定数据的存储空间，一个数据中心至少包含一

(StorageDomain)个存储域，。Virt主要包含3种类型的存储域：

数据域：数据域保存数据中心中所有虚拟机和模板的虚拟硬盘、

OVF文件和快照。

ISO域：ISO域存储用于安装和引导虚拟机的操作系统和应用程

序的ISO文件（或逻辑CD）。它可以跨不同的数据中心共享。

导出域：导出域是用于在数据中心和oVirt环境之间复制和移动

镜像的临时存储库。导出域可用于备份虚拟机。

集群集群是共享相同存储域并具有相同类型CPU（Intel或AMD）的

(Cluster)主机的逻辑分组。如果主机有不同的CPU型号，它们只使用所

用型号中的功能。

系统中的每个集群都必须属于一个数据中心，系统中的每个主

机都必须属于一个集群。虚拟机动态分配给集群中的任何主机，

并可以根据集群中定义的策略和虚拟机上的设置在它们之间进

行迁移。集群是可以定义电源和负载共享策略的最高级别。

集群运行虚拟机或Cluster存储服务器。这两个目的是互斥的：

单个集群不能同时支持虚拟化和存储主机。

VDSM每一个Node上都会运行一个VDSM,实现网络、存储器、虚

名词说明

(VirtualDesktop拟机的创建与修改的功能。VDSM的大部分代码用在了存储系

ServerManager)统上，其功能包括数据的组织，集群下的数据共享与保护，故

障恢复。通常情况下每一个物理机器当作一个Node,运行一个

VDSM,Node本身只携带少量存储器用以保存配置。一个集群

中通常有一个Engine和数个Node,这些Node通过网络连接

到SAN(StorageAreaNetwork)上，VDSM把Node上运行的

虚拟机存储数据保存在SAN上，Node本身为无状态的节点，

重新启动后状态消失，从而保证了系统整体的可用性，一般情

况下不会因用户的操作而使Node失效。一旦问题发生，通常

一次重启既可恢复工作状态。

2.2硬件配置要求

最小配置要求建议配置要求

CPU:8核CPU：2*12核以上

内存：16GB内存：256GB以上

系统盘：100GB以上系统盘：100GB以上

数据盘：100GB以上数据盘：1TB以上

网络:IGbps网络：IGbps以上

测试环境可以参考最小配置要求，生产环境参考建议配置要求。

2.3安装系统

采用H3c发布的oVirtlSO可以完成oVirt系统的自动安装，可以在普通BIOS和UEFI上

引导安装，需要注意的是安装时将删除原有系统的分区.

^\注意

I.采用H3c的oVirtISO进行系统安装，整个过程没有交互，安装时将删除原有系统的

分区和数据；

2.每个一体机都需要安装oVirt操作系统。

安装界面类似:

anacondaZl.48.ZZ.156-1forCentOS7started.

,*installationlogfilesarestoredinztmpduringtheinstallation

"shellisavailableonTTYZ

"whenreportingabugaddlogsfrowztiwpasseparatetcxt/plainattachments

80:19:26Runningpre-instd1lationscripts

08:19：27NotaskingforUNCbecauseofanautomatedinstall

88:19:27NotaskingforW1Cbecausetextmodewasexplicitlyaskedforinkickstart

B8：19：Z7Notaskingfor5cbecausewedon'thaveanetwork

Startingautomatedinstall.....................................

Checkingsoftwarcselection

Generatingupdatedstorageconfiguration

Checkingstorageconfiguration...

Installation

1)lx]LanguagesettingsZ)IxlTimesettings

(English(UnitedStates))(Asia/Shanghaitimezone)

3)[x]Installationsource4)lx]Softwareselection

(Localmedia)(Customsoftwarcselected)

5)(x)InstallationDestination6)(x)Kdump

(Custonpartitioningselected)(Kdumpisenabled)

7)I]Networkconfiguration8)[]Usercreation

(Notconnected)(Nouseruillbecreated)

Progress

Settinguptheinstallationenuiraniaent

Creatingdisklabelonzdev/sda

Creatingl^wpvonzdcv/sdaZ

Creatingext4onzdev/mapper/HastUG-root

|【anaconda】1：zin-2：sheIT4：stora!

安装完成后，会自动重启。

重启后，点击“FINISHCONFIGURATION”操作系统的安装。

INITIALSETUPCENTOSLINUX7(CORE)

国usHelp?

CentOSLICENSING

UCENSEINFORMATION

L*JLicenseaccepted

SYSTEM

fORK&HOSTNAME

(ensl92)connected

ourrRNISHCONFIGURATION

系统默认安装在sda上。

2.4针对系统优化

1.启用coredump,该部分在后续的系统优化时会加入，执行如下命令：

#echo-cunlimited"»/etc/profile

#systemctldisableabrtd

#systemctlstopabrtd

2.确认时区和系统时间是否正确，如果时区和系统时间不正确，在engine安装之后再调整

时区和系统时间，可能引起一些不可预料的问题。

注意

1.请务必确认每台机器的时区和系统时间设置正确，如有条件可以设置NTP时间同步。

2.5配置IP地址

每个一体机系统必须至少设置一个固定IP地址，该IP地址可以和oVirt-Engine主机通讯,

而且该IP地址必须设置正确的子网掩码和网关地址。

网卡配置参考如下：

[root@i2box-]#cat/etc/sysconfig/network-scripts/ifcfg-ensl92

rYPE=Ethernet

PROXY_METHOD=none

BROWSER__ONLY=no

B00TPR0T0=none

IPADDR=10

PREFIX=2Q

DEFROUTE=yes

IPV4_FAILURE_FATAL=no

IPV6INIT=yes

IPV6_AUT0C0NF=yes

IPV6二DEFROUTE=yes

IPV6二FAILURE_FATAL=no

IPV6_ADDR_GEN_M0DE=stable-privacy

MAME=ensl92'

UUID=eff2blb0-5e03-45d4-82b8-cb351861aa5b

DEVICE=ensl92

ONBOOT=yes

GATEWAY=

网卡信息参考如下:

[root@i2box-]#ipaddr

1:lo:<LOOPBACKrUP,LOWER_UP>mtu65536qdiscnoqueuestateUNKNOWNgroupdefaultqlen1000

link/loopback00:00:00:00:00:00brd00:06:00:00:00:00

inet1/8scopehostto

valid__lftforeverpreferred_lftforever

inet6：:1/128scopehost

valijlftforeverpreferred_lftforever

2:ensl92:<BROADCAST,MULTICAST,UP?LOWER_UP>mtu15G0