太仓数据中心ERP和E-HR升级改造项目技术文件

上海保利协鑫电力运行管理有限公司

太仓数据中心ERP和E-HR升级改造项目

技

术

文

件

（正本）

南京科技有限公司

2014年9月

目录

第一章项目概述..........................................................................5

1.1.建设目的..............................................................................................................................................................5

1.2.系统现状..............................................................................................................................................................5

1.2.1.ERP、E-HR数据库服务器现状.......................................................5

1.3.存在问题..............................................................................................................................................................5

1.3.1.性能不足.........................................................................5

1.3.2.安全风险.........................................................................7

1.3.3.存储空间不足......................................................................7

第二章方案设计..............................................................................................................................................................8

2.1.设计目标..............................................................................................................................................................8

2.1.1.建立稳定的冗余负载均衡数据库服务环境,减少全年业务中断时间。..................8

2.1.2.提高数据库的服务性能,满足业务部门不断提高的性能要求。.........................8

2.1.3.部署全面覆盖、自动执行的备份体系,同时消减历年累计的各类安全问题。............8

2.2.规范标准..............................................................................................................................................................8

2.3.设计原则..............................................................................................................................................................8

2.3.1.技术先进性........................................................................8

2.3.2.标准化...........................................................................9

2.3.3.可扩展性.........................................................................9

2.3.4.可用性............................................................................9

2.3.5.兼容性...........................................................................9

2.3.6.可靠性............................................................................9

2.3.7.冗余性...........................................................................9

2.3.8.容错性...........................................................................9

2.4.解决问题............................................................................................................................................................10

2.4.1.安全风险解决.....................................................................10

2.4.2.性能不足解决.....................................................................10

2.4.3.存储空间解决.....................................................................11

2.5.设备环境............................................................................................................................................................12

2.5.1.目前拓扑环境.....................................................................12

2.5.2.改造后拓扑环境...................................................................12

2.5.3.目前已有设备.....................................................................13

2.5.4.改造需增加设备及服务............................................................14

2.6.改造升级............................................................................................................................................................15

2.6.1.在新设备安装AIX7.1并搭建数据库llGrac的测试环境,协同ERP、E-HR开发人员和业务使

用人员,对11G环境下的ERP和E-HR业务应用进行业务稳定性测试（测试内容由业务部门定制）,并

将测试结果反馈本项目人员。如长时间测试无法解决问题,则继续使用原有1OG。..............15

2.6.2.搭建数据库服务器和存储系统新环境，aix系统采用7.1,数据库为。radellG.搭建数据库

rac结构,导入正式库数据库数据,并建立备份环境,进行业务稳定性测试。...................15

2.6.3.测试正常后,暂停ERP和E-HR服务,将ERP和E-HR最新数据库在线迁移至新环境,测试无

误后,正式上线并对外提供服务。..........................................................15

2.6.4.将原有系统和存储重新配置,安装Aix7.1系统和orade11grac,导入正式库数据库数据进行

测试,测试新环境对E-HR和ERP的运行支持的稳定性。......................................15

2.6.5.测试正常后,暂停新系统中的E-HR服务,导入E-HR最新数据库至旧环境,测试无误后,正

式上线并对外提供服务。..................................................................15

2.6.6.完善现有的备份体系,移植和完善集团和电力现有虚拟化平台。......................15

2.6.7.从方案上要保证整个实施的零风险,而不仅仅是从操作方法上降低风险。尽量缩短业务的停

顿时间。迁移过程中要保证现有系统状态不受影响,一旦迁移出现任何异常,都能够立即终止迁移动

作,并将业务切换到原有状态,保证数据及业务的安全。将整个实施流程分割成多个操作单元,操作

单元之间的关联性很小,一个操作单元的实施结果不会对另一个实施单元造成影响。操作单元内的操

作要做到简单可控。......................................................................15

2.7.数据库在线迁移和升级..................................................................................................................................15

2.7.1.任务.............................................................................15

2.7.2.现状............................................................................17

2.7.3.前期准备...................................................................................................................................................17

2.7.4.迁移演练...................................................................................................................................................18

2.7.5.迁移步骤...................................................................................................................................................19

2.7.6.数据验证...................................................................................................................................................20

2.7.7.迁移回退..................................................................................................................................................21

2.8.配套的升级改造.......................................................................22

2.8.1.小机NX.....................................................................................................................................................22

2.8.2.存储...........................................................................................................................................................25

2.8.3.备份............................................................................................................................................................25

2.8.4.虚拟化.......................................................................................................................................................25

第三章项目管理.............................................................................27

3.1.文档管理.............................................................................27

3.1.1.项目资料文档:.......................................................................................................................................27

3.1.2.实施安装文档:.......................................................................................................................................28

3.2.组织管理.............................................................................28

3.2.1.项目领导小组...........................................................................................................................................28

3.2.2.项目实施小组...........................................................................................................................................28

3.2.3.测试验收小组...........................................................................................................................................28

3.2.4.质量管理小组...........................................................................................................................................29

3.3.过程管理.............................................................................29

3.3.1.设备采购...................................................................................................................................................29

3.3.2.安装准备...................................................................................................................................................29

3.3.3.安装调试...................................................................................................................................................29

3.4.进度管理.............................................................................29

3.4.1.到货进度...................................................................................................................................................29

3.4.2.实施进度...................................................................................................................................................30

3.5.质量管理.............................................................................30

3.6.安全管理.............................................................................30

3.6.1.思想保证体系...........................................................................................................................................31

3.6.2.组织保证体系...........................................................................................................................................31

3.6.3.工作保证体系...........................................................................................................................................31

3.7.阶段管理.............................................................................31

3.7.1.准备阶段...................................................................................................................................................31

3.7.2.实施阶段..................................................................................................................................................31

3.7.3.验收阶段...................................................................................................................................................31

3.8.联络管理.............................................................................31

3.9.实施管理.............................................................................32

3.9.1.实施步骤...................................................................................................................................................32

3.9.2.实施周期...................................................................................................................................................33

3.9.3.实施人员...................................................................................................................................................34

3.10.流程管理............................................................................38

3.10.1.安装流程...................................................................................................................................................38

3.10.2.测试流程...................................................................................................................................................42

3.10.3.验收流程...................................................................................................................................................44

第四章客户培训............................................................................47

4.1.培训体系.............................................................................47

4.1.1.培训安排...................................................................................................................................................47

4.1.2.培训计划...................................................................................................................................................48

4.2.现场培训.............................................................................48

4.3.课程培训.............................................................................48

4.3.1.AIX培训....................................................................................................................................................48

4.3.2.ORACLE培训............................................................................................................................................49

4.3.3.培训计划和内容......................................................................................................................................50

第五章支持服务.........................................................................51

5.1.售后支持.........................................................................51

5.1.1.科技客户服务优势..................................................................................................................................51

5.1.2.科技客户服务简介..................................................................................................................................51

5.1.3.售后服务体系综述...................................................................................................................................52

5.2.服务承诺.........................................................................54

5.2.1.产品保修..................................................................................................................................................54

5.2.2.维护和咨询...............................................................................................................................................55

5.2.3.设备统计和巡检服务...............................................................................................................................55

5.2.4.支持服务...................................................................................................................................................57

5.3.服务响应.........................................................................57

5.3.1.电话响应...................................................................................................................................................57

5.3.2.Internet与电子邮件响应.......................................................................................................................57

5.3.3.远程维护响应...........................................................................................................................................57

5.3.4.现场服务响应...........................................................................................................................................58

第六章产品清单.........................................................................59

第一章项目概述

1.1.建设目的

本次信息化改造项目招标为已有的ERP及E-HR的基础上，对当前系统应用进行相应的

冗余负载均衡升级改造，并完成相关配套调整，以保障协鑫ERP和E-HR系统健康运行。

通过在太仓数据中心对ERP和E-HR系统进行升级，调整相关配套设备和服务，将在

太仓建立高效稳定的ERP和E-HR应用。

1.2.系统现状

1.2.1.ERP>E-HR数据库服务器现状

1.2.1.1.ERP和E-HR数据库肩负着协鑫电力ERP应用和全集团E-HR应用的后台数据

库服务任务，属于最关键的核心业务之一，但目前设备陈旧、版本过低，面临越

来越高的风险。

1.2.1.2.ERP和E-HR应用服务器去年已完成更新换代和升级，改善了ERP和E-HR的

访问性能，但随着ERP和E-HR业务的快速扩充，特别是E-HR档案模块上线和后

续各类开发，引发了数据库的各类故障和bug,数据库低版本和硬件性能不足越

来越成为一块短板，拉低了整体性能和稳定性。

1.2.1.3.鉴于数据库服务器已成为故障的根源，经集团信息部、协鑫电力信息部、厂

商联合调查讨论后，认为升级改造数据库硬件和软件是解决问题的根本办法。

1.3.存在问题

1.3.1.性能不足

ERP负载集群E-HR主备

存储

阵列

如上图所示：集团ERP和E-HR数据库为同一数据库，负载不大的情况下可正常运行，

但月末和月初集中核算期间，ERP和E-HR处于高负载运行，互相抢占数据库和存储带宽，

会造成ERP和E-HR访问性能急剧下降；此外，这种模式也会对权限划分、后期维护造成负

面影响，其故障判断和恢复也造成很大延误。

1.3.2.安全风险

1.3.2.1.两台数据库服务器迄今已服役八年，其宕机风险也越来越大。

1.3.2.2.目前oracle厂商最新版本为oracle12C,而当前的10G版本近期将停止技

术支持；操作系统的AIX系统版本为低版本的5.3,其安全性和版本支持性问题

也在逐渐凸显。

1.3.2.3.目前Oracle数据库无有效维保，所有维护和故障处理全靠内部IT人员自行

查找和解决，无厂商的技术支持。

1.3.2.4.Symantec备份体系只包含现有ERP和E-HR数据库环境，应用环境和其他关

键服务采用第三方软件组合，可靠性差。

1.3.3.存储空间不足

1.3.3.1.现有数据量呈爆发性增长，剩余空间已远远无法满足后续使用需求，以ERP

和E-HR生产数据库为例，2013年初数据库的占用空间为250G,但截至2014年

5月，数据量达到600G,其中，主要的增长是由于E-HR的扫描件上传引起，按

照每年近400G增长量，考虑到后续3-5年，须预备2T空间，而对应的备份空间

需要8T。另外，考虑到业内虚拟化主流趋势和协鑫数据中心规划，未来服务器将

尽量不再采购，但存储空间要求相应提高，仅参考目前要建立数据库测试环境、

PM环境、SIS环境、虚拟化平台和其他关键应用，须预备10T空间；最后，考虑

到徐州数据中心灾备，预留10T空间，合计30T空间的使用需求。

第二章方案设计

2.1.设计目标

2.1.1.建立稳定的冗余负载均衡数据库服务环境，减少全年业务中断时间。

2.1.2.提高数据库的服务性能，满足业务部门不断提高的性能要求。

2.1.3.部署全面覆盖、自动执行的备份体系，同时消减历年累计的各类安全问题。

2.2.规范标准

本技术方案中涉及的所有规范、标准或材料规格（包括一切有效的补充或附录）均

为最新版本，即以招标人发出本信息系统定单之日作为采用最新版本的截止日期。系统

中所有设备的设计，检查，试验及特性除本规范中规定的特别标准外，都遵照适用的最

新版中国国家标准（GB）及电力行业（DL）标准，以及国际单位制（SI）。我方提出的

等同标准应不低于招标人要求的标准并征得招标人的认可，本方案遵循的标准包括：

>IEC国际电工学会

>AIEE美国电气电子工程师协会

>ANSI美国国家标准化协会

>NEC美国国家电气标准

>ISO国际标准化组织

>TCP/IP系统传输控制协议和接口程序

>IEEE802局域网协议标准

>电磁学规范：FCCClass.A.FCCClass.B或CISPR22Class.B

>安全规范：ULListed（美国）或EN60950（国际）

>质量标准：IS09000认证

>智能终端、显示器等设备应符合能源之星（EPA）标准

2.3.设计原则

建设原则按照“统一设计，分步实施”。

2.3.1.技术先进性

当今世界，通信和计算机技术的发展日新月异，我们的方案应该适应新技术发展的

潮流，既要保证系统的先进性，同时又要确保各项技术的成熟性。

2.3.2.标准化

计算机管理信息系统就是要实现系统及设备资源的共享，把不同厂商的设备和计算

机软件进行互连。在一个复杂的大型系统系统里，必然有多个厂商的硬件及软件，为了

保证用户的计算机系统系统具有互操作性、可用性、可靠性、可扩充性、可管理性，需

要建立一个开放式、遵循国际标准的系统系统。

2.3.3.可扩展性

由于用户业务的不断发展，系统系统必然随之不断扩大，为此，目前的系统设计必

然为今后的扩充留有足够的余地，以保护用户的投资，并且不影响原有用户的工作。

2.3.4.可用性

由于本系统对于数据的时效性、可靠性要求较高，因此在设计时应重点考虑系统及

设备的可用性。我们的方案要充分考虑用户的费用情况，不但理论上可行，更重要的是

实际上可用，最好地适应用户的需要。

2.3.5.兼容性

系统结构有良好的兼容性，能够实现与不同类型的子网的无缝连接。

2.3.6.可靠性

为使系统可靠地运行，我们方案中要选用高品质的产品，把故障率降到最小。

2.3.7.冗余性

在设计时应考虑为系统留有适当的冗余度，硬件设备应具备一定的冗余模块，以提高

系统容错能力。

2.3.8.容错性

设备容错性：所选用设备必须具有全容错结构，一台设备中单个电源、单个风扇的故

障不影响设备工作，单个模块的故障不影响其它模块的正常工作；设备应具有热修复能

力，即当设备的某些部件发生故障时，可以带电更换而不影响设备其它部件工作，新更

换部件可直接投入工作而不必重新引导整个设备。

2.4.解决问题

2.4.1.安全风险解决

2.4.1.1.新购2台IBMP740小型机服务器，将数据库实例从现有超期服役数据库服务器

中分离出来，并使用双实例进行交叉负载均衡

2.4.1.2,数据库升级：测试并升级至11G版本

241.3.AIX系统升级：测试并升级至7.1版本

2.4.1.4.数据迁移：重新安装和部署数据库系统，并将现有ERP数据迁移至新系统。

2.4.1.5.原有环境：原有数据库体系也升级至11G,重新分配存储空间和备份空间后搭建

冗余负载均衡体系，导入E-HR生产数据。

2.4.1.6,维保支持：远程技术支持、版本升级、现场灾难恢复等服务。

2.4.1.7,数据备份：现有SymantecNBU存储备份软件已过期，升级费用很高,为节省成本,

计划不再购买新License,而通过第三方重新建立数据库系统和其他系统的硬盘

和磁带库备份体系。

2.4.1.8.灾难恢复：实际测试并履行一次灾难恢复演练，形成评估报告。

2.4.2.性能不足解决

2.4.2.1.针对资源占用性能不足的问题，本次项目对ERP和E-HR数据库进行分离，ERP

系统数据库从原来的数据库中迁移到新的数据库环境，E-HR继续使用现有数据

库环境，并且通过对数据库和操作系统的升级改造提高两套系统的性能和稳定

性，拓扑图如下：

太仓数据中心ERP和ETIR规划

2.4.3.存储空间解决

2.4.3.1.为满足存储需要，存储设备须可用容量30T,考虑到性价比原则，将ERP、SIS、

PM等高等级数据存储在快盘柜，使用900G10KSAS盘，可用存储空间达到9T；

低等级慢盘柜使用4T7200SAS硬盘，存储空间20T,规划存储各类关键系统的

虚拟化平台、本地和远程灾备等内容。

2.5.设备环境

2.5.1.目前拓扑环境

阵列

2.5.2.改造后拓扑环境

太仓数据中心ERP和ETIR规划

E-HR主备

ERP负载集群

存储存储

阵列F乍歹U

2.5.3.目前已有设备

序

设备名称型号配置资产状态

号

IntelXeonProcessor7320(2.13GHz/4MBL2Quad

Core),1066MHzFSB,4-SMPCPU*4,8GBMem,146GB

EHR服务

10K2.5”SAS热插拔HDD*4,ServeRAID-MRIOk

器IBM

1SAS/SATA控制器256MB缓存/电池备份,2*服1110可E-HR应用服务器

(10.10.2X3850M2

Card,LightPath,Combo,2*GigaEthernet,

.109)

4U,RSAII,2*1440w

OS：WindowsServer2003简体中文

处理器：4*1.65GHzPowerCPU操作系统：AIX5.3

IBM内存：16GB中间件：Websphere

小型机

2P550(NC硬盘：两块146GB热交换硬盘（RAID1）ND6.1

（NC）

+IUF0)网卡：2块千兆以太网卡用友ERP系统：

电源：双电源ERP-NC5.02

处理器：4*1.65GHzPowerCPU

内存：16GB

小型机IBM操作系统：AIX5.3

3硬盘：两块146GB热交换硬盘（RAID1）

（IUF0）P550数据库：ORACLE10g

网卡：2块千兆以太网卡

电源：双电源

操作系统：AIX5.3

IBM处理器:2*1.5GIlzPowerCPU

数据库:Oracle10g

P520(NC内存：8GB

小型机中间件：Websphere

4测试硬盘：两块146GB热交换硬盘（RAID1）

（测试）ND6.1

10.10.2网卡：2块千兆以太网卡

用友ERP系统:

.104)电源：双电源

ERP-NC5.02

IBM处理器：2*1.5GHzPowerCPU

小型机P520(电内存：8GB操作系统：AIX5.3

5(exchang子商务硬盘：两块146GB热交换硬盘（RAID1）oracleexchange

e)10.10.2网卡：2块千兆以太网卡server

.106)电源：双电源

IBM处理器：8*4.2GHpower6

P0WER6内存：24GB

小型机生产数据库服务器

P550(0R硬盘：2*146GB

6（数据操作系统：AIX5.3

ACLE网卡：2块千兆以太网卡

库）数据库：ORACLE10g

10.10.2光纤卡：2*光纤通道卡

.108)电源：双电源

ERP系统

ERP系统存储光纤交换12口光纤交换机8XGB1C□连接小型机与IBM

7存储光纤IBME12

（满配12□）DS4300盘柜

交换机

ERP系统

ERP系统存储光纤交换12口光纤交换机8XGBICn连接小型机与IBM

8存储光纤IBME12

（满配120）DS4300盘柜

交换机

FAS2040

9存储阵列存储系FAS2040存储系统4.2TERP,HER使用

统

博科

SAN交24口光纤交换机，4GbpsSWSFP(8-pack),LC/LC5

10光交换机ERP,HER使用

换机m50U,8-PortActivation

310

博科

SAN交24口光纤交换机，4GbpsSWSFP(8-pack),LC/LC5

11光交换机ERP,HER使用

换机m50U,8-PortActivation

310

ERP,数据库等备份

12磁带库TS3100IBMTS3100磁带库

使用

2.5.4.改造需增加设备及服务

数量

费用类型配置型号备注

（台）

IBMPower7404.2GHZ8核

服务器2

CPU/64GB/SAS2*300GB/DV【)/2*HBA/光驱

SAN交换机2EMCDS300B交换机：24口激活8口

EMC540015*900GB10K2.5寸(主机扩至18*900GB

存储系统1

10K2.5寸硬盘，10*4TB3.5寸硬盘)

HBA卡4Emulex8GBFCPCI-EHBAforIBMSystemX

小型机安装、新旧存储系统配置、Oracle核心数据

IBMPowerxOrac1e库RAC10G11G搭建、测试。ERPHROracle核心

1

实施服务数据库迁移、分离Oracle数据库RAC安装、迁移和

恢复测试等安装部署

SymantecNBU服务器搭建*1,AIXOracleRAC数据

NBU备份1

库备份*2,Windows操作系统备份*4。

Oracle维保1现场灾难恢复和技术支持服务，高级人天巡检人/天