新老系统迁移及整合方案样本

1、1 新老系统迁移及整合方案本次总局综合业务系统是在原有系统基本上开发完毕，因而，新旧系统间就存在着切换问题。此外，新开发系统还存在与其她某些应用系统，例如，公司信用联网应用系统、公司登记子网站、外资登记子网站等系统进行整合使之成为一种互相连通系统。本章将针对新老系统迁移和整合提出解决方案。新老系统迁移及整合需求分析系统迁移又称为系统切换，即新系统开发完毕后将老系统切换到新系统上来。系统切换得重要任务涉及：数据资源整合、新旧系统迁移、新系统运营监控过程。数据资源整合包括两个环节：数据整顿与数据转换。数据整顿就是将原系统数据整顿为系统转换程序可以辨认数据：数据转换就是将整顿完毕后数据按照一定转换规

2、则转换成新系统规定数据格式，数据整合是整合系统切换核心：新旧系统迁移就是在数据对的转换基本上，制定一种切实可行筹划，保证业务办理顺利、平稳过渡到新系统中进行；新系统运营监控就是在新系统正常运转后，还需要监控整个新系统运营有效性和对的性，以便及时对数据转换过程中浮现问题进行纠正。系统整合是针对新开发系统与保存老系统之间整合，以保证新开发系统能与保存老系统互动，保证业务顺利开展。重要任务是接口开发。需要进行迁移系统需要进行整合系统需要与保存系统整合系统涉及：1、公司登记管理含信用分类，全国公司信用联网记录分析，不冠行政区划公司名称核准，大屏幕触摸屏系统与公司信用联网应用，公司登记子网站，属地监管传

3、播，网上业务受理之间整合；2、外资公司登记管理含信用分类），全国外资公司监测分析与属地监管传播，外资登记子网站，网上业务受理，大屏幕触摸屏系统之间整合：3、广告监管系统与广告监管子网站之间整合：4、12315 数据记录分析与 12315 子网站之间整合：5、通用信息查询、记录系统与数据采集转换之间整合：数据迁移和转换分析依照招标文献广东省工商局新建系统数据库基于 SAP Sybase ASE 15.7，而原有系统数据库涉及 ORACLE,SQLServer,DB2。这种异构数据在总局重要存在于两个方面，即部门内部异构数据和上下级部门之间异构数据。同步，系统技术构件有 NET 和 J2EE 两大

4、类。对于部门内部异构数据集成采用数据移植办法，如：如果数据有基于 DB2 管理，有 ORACLE 管理，有 SQLServer 管理，就依照新系统 SAP Sybase ASE 15.7 规定，把 ORACLE 数据迁移到 SAP Sybase ASE 15.7 数据库中，把 SQLServer 数据迁移到 SAP Sybase ASE 15.7 数据库中。上下级工商系统之间异构数据集成运用数据互换系统来完毕，重点在于数据库存储原则、互换原则制定和遵守，保证数据共事，这某些工作由数据中心完 毕。系统迁移和整合目的一、系统切换重要目的：保证系统正常运营在数据转换过程中，由于原有系统数据复杂性，给

5、数据转换工作带来了很大难度，为了在新系统启动后不影响原系统正常业务，因而数据转换完毕后，必要保证新系统正常运营。保证原有系统在新系统中独立性原有系统是独立运营系统，数据在新系统中虽然是集中存储，但是各个系统由于存在业务上差别，数据在逻辑上应当保持一定独立性。二、系统整合目的：保证直接关联系统互动，保证业务正常办理。例如公众服务系统与基本业务系统之间互动，基本业务与协同业务之间互动等等。系统切换方案系统切换工作流程系统切换涉及前期调研、数据整顿、数据转换、系统切换、运营监控五个阶段。系统切换整个工作流程如下所示：图 1-1 系统切换流程示意图系统切换工作环节前期调研阶段前期调研是数据转换中很重要

6、一种环节，也是至关重要一某些。在进行数据转换工作前，咱们需要先认真阅读系统有关文档，如数据字典、系统概要设计报告等，来熟悉原有系统。固然在阅读文档过程中必定还会有理解不清晰地方，这时还需要熟悉原有系统工程师协助。数据转换前期工作就是对原系统做一次彻底全面理解，重要需要考虑有下面某些状况：1、原系统网络构造：2、原系统业务范畴、存在几套业务系统以及她们之间关系：3、原系统开发商、开发工具、开发平台以及采用数据库：4、原系统数据分布状况：涉及数据范畴、数据量大小等；5、原系统业务流程：6、原系统数据流程；7、原系统数据构造：在理解这些要素基本上，需要编写前期调研分析报告。调研报告重要包括如下某些方

7、面：1、将所有数据表进行分类，如系统参数类、代码类、综合业务类、有关业务类等等。2、对所有数据表数据构成、数据来源、用途等进行描述。3、并非所有数据都是需要进行转换，在数据字典分析报告中要指出那些数据表是需要进行转换，那些是不需要进行转换，对于不需要转换表要阐明不需要转换因素。4、描述数据在各表中流向，对于核心或复杂业务点要做详细阐明。转换设计阶段转换设计阶段重要是完毕新旧数据字典对照，同步明确各个表中详细数据字段转换方式。在转换设计阶段重要是编写数据字典对照报告，数据字典对照报 告重要描述新旧系统数据表间对照关系以及代码对照关系。以新系统为准，原系统作参照，将原系统数据字典相应到相应系统数据

8、字典中。在对照过程中，需要遵循数据照搬原则，数据尽量不要作解决。在数据字典对照表中需要进行转换数据字段应当一一相应，对新旧数据表中字段名称、类型、精度等都要有详细描述，同步还要明确数据转换方式。数据转换方式重要有如下几种：直接转换。直接转换方式是最惯用方式，就是将原表中相应字段数据原封不动搬到新表中来。按照“数据照搬”原则，咱们应当尽量采用这种办法。程序转换。对那些需要进行计算才干进行转换数据将采用程序转换方式进行。代码对照。某些代码字段，往往新旧系统编码不相似，这时就需要参照代码对照表进行代码对照转换。类型转换。少数数据也许需要对类型进行转换，如就表以字符串YYYY-MM-D D来存储日期，

9、而新表中以 DATE 型来存储日期，这时就需要进行类型转换。常量转换。新表中某些字段也许存在缺省值，这时将采用常量转换方式，当旧表没有相应字段或旧表相应字段数据为空时，将直接在新表中写入缺省数据。不转换。对于旧表有但新表中没有字段将不作任何转换。新旧系统代码对照列出了所有需要进行转换新旧系统数据表中存在二级代码间对照关系，重要以二级代码对照表形式来反映。数据迁移一、数据整顿方略数据整顿就是将原系统数据整顿为系统转换程序可以辨认数据。数据整顿大体分为两个阶段：第一阶段就是将不同类型来源数据采集备份到统一数据库中：第二阶段就是将原始数据进行整顿，按照不同规定分类进入不同中间数据库，为数据转换提供中

10、间数据。数据整顿过程采用了如下办法：保证原始数据完整性在进行数据整顿之间，咱们先需要对原始采集数据进行备份。备份目有两个： 一种是统一数据库，便于数据转换，另一种就是为后来数据追根溯源提供参照根 据。在本系统中，咱们将采用 DB2 作为备份统一数据库。数据分级过滤方略数据分级过滤就是把数据按照不同数据级别进行分类整顿进入不同中间数据库中。本系统中咱们把数据分为三个级别：废弃数据、待调节数据、可转换数据。废弃数据就是该某些数据存在对系统资源导致挥霍数据，并且会影响后来系统运营。待调节数据就是该某些数据严重影响新系统运营，必要进行人工调节后，方可进行数据转换。可转换数据就是该某些数据不需做任何解决

11、，基本满足数据转换规定或者是该某些数据新系统建议调节，但是不影响系统运营，可以等新系统运营后再调节，这样可觉得数据转换工作节约诸多时间。借助数据整顿有关工具数据整顿非常艰巨，涉及数据量很大，通过人工检查是不也许完毕，因而必要编写有关数据整顿工具完毕数据整顿。涉及数据整顿工具和数据纠错工具。数据整顿工具负责将原始备份数据库中数据进行分类进入不同中间数据库：数据纠错工具负责提供和谐、以便工具界面供顾客方有关人员完善和纠正错误数据。运用中间库作为桥梁由于原系统和新系统数据库构造也许不同样，因此采用中间库作为衔接新旧系统数据重要桥梁，对于建立新旧系统对照关系很重要。一旦业务人员对新系统中某项转换数据存

12、在疑问状况下，就可以通过中间库关联，顺利找出原数据。二、数据转换数据转换就是将整顿后数据，依照对照表规定进行转换，并写入到新系统。这个过程可以通过互换系统实现。三、数据整顿与转换环节设计数据移植方案设计数据移植方案重要涉及如下几种方面工作：研究历史数据构造、来源、数据项定义、取值等现状，研究新旧数据库构造差别，评估和选取数据移植软硬件平台、选取数据移植办法、选取数据备份和恢复方略、设计数据移植和测试方案等。源数据库数据清理对于一种运营己久数据库，重要存在三种数据库垃圾：数据库对象垃圾、数据库权限垃圾、数据垃圾。数据库对象清理不是一件容易工作，需有认真负责态度， 要有耐力，任何错误清理不但会导致

13、前端不能运营，并且将会导致数据丢失。因此清理数据库对象也许需要一种安全、精确，可不久恢复办法。一方面要结识数据库资源，涉及数据库对象，如表、数据库事件、过程、函 数，数据库构造关系，在此基本上结合运营系统，确认数据库垃圾，制定合理垃圾清理方案，达到清理垃圾目。重要办法是对数据库数据进行整合和分解，整合有关数据减少数据重复，分解，数据则可是数据团队更趋向合理，固然整合和分解要以适合新设计数据库构造为基本，以便简化转化程序。进行数据模仿移植依照设计数据移植方案，建立一种模仿数据移植环境，它既能仿真实际环境又不影响实际数据，然后在数据模仿移植环境中测试数据移植效果。数据模仿移植前也应按备份方略备份模

14、仿数据，以便数据移植后能按恢复方略进行恢复测试。测试数据模仿移植依照设计数据移植测试方案测试数据模仿移植，也就是检查数据模仿移植后数据和应用软件与否正常，重要涉及：数据一致性测试、应用软件执行功能测试、性能测试、数据备份和恢复测试等。准备实行数据移植数据模仿移植测试成功后，在正式实行数据移植前还需要做好如下几种方面工作：进行完全数据备份、拟定数据移植方案、安装和配备软硬件等。正式实行数据移植按照拟定数据移植方案，正式实行数据移植。数据整顿和转换核心技术对于多源异构数据库之间数据转换，由于目的数据库格式和约束限制严格，直接编写转换程序实现困难，可在原有数据库系统中编写转换程序。对于源数据库、目的

15、数据库构造有差别数据，建立中间过渡库，中间库在原数据库平台中建立，但构造与目的数据库构造相似。将源数据库转入中间库过程是一种数据重新组合和关联过程，将是转换中心和重点工作，需要对源数据库与新数据库数据关系进行进一步分析，对每一种数据库写出转换方略。非空解决：对于应当非空但实际为空记录制定解决规则。取值约束解决：对于有取值范畴约束宇段进行规范化解决，即将转换后数据取值规范到该范畴内。主键解决：重新对中间库进行编号。填写外键：每个数据库或多或少存在外键，外键越多，标明与其他库关联越多，这样库应后解决：反之，外键越少库应当先解决。唯一键解决：对规定唯一数据项（主键、唯一键）进行唯一检测，并对检测出不

16、唯一记录，制定解决规则。附加分散解决：对某些表中某些字段进行数据规范化解决，即将不合规范数据替代成规范数据，几种表之间关联解决，以及某些特殊解决等。数据一致性解决： 对于有各种数据源数据进行一致性检查，制定解决规则。新旧系统切换第一步：编写系统切换方案。系统切换方案涉及系统切换办法、系统切换筹划等内容。第二步：组织有关人员对系统切换方案进行评审，如果未通过，则需要调节系统切换方案。第三步：进行业务系统数据转换。在进行业务系统数据转换前，需要先选取一种时间点进行业务系统数据采集。该时间点选取以完毕一种完整业务周期为准。转换时机依照以往经验，咱们建议将正式数据转换时间放在月结刚刚完毕后并且最佳是节

17、假日。准备工作正式数据转换前准备工作是非常多，现列举如下：编写详细数据转换指南。数据转换指南应当是在前面几次试转换过程中编写并完善，要详细阐明数据转换全过程，涉及：准备工作、执行环节、注意事项等。编写执行脚本。在前面几次试转换基本上编写并完善好数据转换执行脚本。执行脚本涉及：转换执行脚本、验证执行脚本等。所有脚本都必要安装执行先后顺序编写，在正式转换时将按照顺序来执行。数据库环境准备。依照以往经验，在正式转换阶段浮现异常往往都是有数据库方面，大某些是由于数据库环境没有准备好。数据库方面需要做好如下几方面准 备：表空间划分、大数据文献准备、大回滚段准备、创立索引等。其她必要准备。在正式转换前，老

18、系统要停止使用，同步在还需要把老系统数据做一次完整备份。执行过程数据转换时将按照己经编写好转换执行脚本来进行。对没一步操作都要做好日记记录，日记分两种，一种是计算机自动产生日记，如 LOG 文献：另一种是在转换执行过程中手工做记录。在正式转换肘，规定至少两人一起工作，其中一人负责操作，此外一人负责监督，两人都必要做好记录。每执行完一条转换命令后都需要去查看某些错误记录衰，如果浮现异常错误信息，需要暂停转换执行，对错误分析解决完毕后才干继续执行。验证过程转换执行结束后，需要对转换成果进行验证，验证时按照已经编写好验证脚本来进行，验证最佳由两名以上人员分开来进行，在验证过程中做好每一步验证记 录。

19、如果在验证过程中没有发现异常，并且几名验证人员验证记录都非常一致，则可以以为已经通过验证。收尾工作数据转换工作执行完毕后，需要对关闭原有系统所有业务经办功能，只开发查询功能，以便业务人员在需要时可以继续查询旧系统中数据。对新系统数据进行一次物理备份，同步启动新系统数据库重做日记功能。到此时为止新旧系统数据转换工作所有结束，整个应用系统将切换到新系统上来运营。第四阶段：新系统运营监控及数据整顿在所有新系统平稳运营后，还需要进行定期运营监控以及对某些数据进行调 节。对于那些对系统运营未导致影响，在数据整顿过程中，没有进行数据修正，因此在系统平稳运营后，需要对这些数据进行调节。系统切换保障办法系统在

20、整个切换过程中，安全、平稳过渡是第一位。咱们将采用如下办法保证系统切换安全：1、数据备份在进行新旧系统数据转换时，对原系统数据进行备份以保证历史数据可追溯 性。一旦在新系统中业务办理浮现问题，则可以通过追溯历史数据来判断是数据转换错误，还是新系统程序存在 BUG。2、数据测试数据测试分为两个层次测试，一种是数据监测性测试，就是在数据转换完毕 后，测试数据转换对的性；二是验证性测试，验证性测试通过使用已经通过功能测试新系统办理实际业务来验证数据转换对的性。数据测试是一种核心环节，关系到系统切换成功与否，因此必要加大测试力度来保证数据转换对的性。而与数据测试有关系统功能测试也必要注重，由于如果系统功能如果存在问题，则数据测试也就无法保证对的性。3、切换点选取系统在什么时候进行切换，也是一种很核心问题。普通状况下，咱们都选取一种业务周期结束，下一种业务周期开始时候进行切换。4、切换方式选取系统切换有两种方式，一种是新旧系统并轨运营，一种是新系统单轨运营。对于第一种方式旧系统为主，新系统为辅，在时机成熟时候在切换到新系统运营；第二种是以新系统为主，旧系统为辅，旧系统只是验证新系统业务办理对的与