goldengate从入门到精通异构复制

1、Goldengate从入门到精通 讲师 顾铁军Goldengate从入门到精通 第10周Goldengate异构复制DATAGURU专业数据分析社区Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区法律声明【声明】本视频和幻灯片为炼数成金网络课程的教学资料，所有资料只能在课程内使用，不得在课程以外范围散播，违者将可能被追究法律和经济责任。课程详情访问炼数成金培训网站 Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区AgendaGoldengate异构复制的主要配置工作Definitions file异构初始化的手段MysqlSQLSer

2、verDB2字符集Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区配置OGG异构的主要工作 确认兼容性：查询兼容性列表 确认支持的类型和操作；确认不支持的类型和操作：查询install guide 测试基本的复制链路 Defgen生成定义文件：异构必需 数据初始化 字符集转换和显示Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区Definitions file 常规配置异构必须需要，过滤转换时也会需要目标：SOURCEDEFS； 源：TARGETDEFS Definition file template 表必须是相同（什么是相同，参考

3、admin guide 13.2.1） 在新表add时，无需重新生成定义文件Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区在线数据初始化 - 同类数据库的异构 同类数据库的异构如：oracle10g到oracle11g在线数据初始化的方法： 数据库自带的逻辑数据备份：使用基于SCN的exp、imp、aftercsn完成初始化 OGG的在线初始化：Initial load+handlecollisions 思路：如果数据库中有类似Oracle中的SCN，可以进行一致性的导出或备份，结合OGG的中CSN完成在线数据初始化。 问题：源库数据量非常大的情况下怎么办？Go

4、ldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区在线数据初始化 - 同类数据库的异构 使用中间机（和源端保持同构）的过渡 A和B是异构、A和C是同构 A和B配置复制链路，B库上replicat进程处于stop状态 C库使用A库的热备+log进行重构（如：RMAN），恢复至某SCN； C库用逻辑的数据导出方法（如：expdp、mysqldump、bcp等），生成逻辑备份文件。（因为C库重构完成后，数据是静态的） B库使用C库的逻辑备份文件进行重构 B库完成逻辑重构后，开启B库上的replicat进程，从上面的SCN号开始启动。该方法也可以用于不同种类数据库之间的初始化。

5、（mysql没有类似SCN的概念！）Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区在线数据初始化 不同种类数据库的异构 初始化方法 Initial Load 多个进程 中间机 参考前面OGG对非Oracle数据库支持情况（DDL都不支持、数据类型等）Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区非Oracle数据的复制配置 - mysql Mysql的Demo以Mysql 5.6 linux - Mysql 5.6 windows为例（参考mysql Demo） Mysql的初始化手段无SCN概念；在线只有考虑initial lo

6、ad：多路进程加速（参考附件的2个html文件）Mysql自己的手段（还是需要停业务）：mysqldump；select into outfile、load data infileGoldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区Initial load多路拆分 几种拆的手段： SQLPREDICATE读的速度最快Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区非Oracle数据的复制配置 - SQLServer SQLServer的Demo以sql server 2008 - sql server 2008 为例 SQLServer的

7、初始化手段Backup database时有LSN，设计在线初始化方案；LSN类似于RMAN的backup才有。借助中间机完成；initial load如果目标是sql server，可以结合BCPGoldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区非Oracle数据的复制配置 - DB2 DB2的Demo以DB2 9.7 - DB2 9.7为例 DB2的初始化手段Backup database时有LSN，设计在线初始化方案；initial loadDB2数据导入导出Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区字符集的考虑 客户端、s

8、erver端的字符集的转换过程必须理解 Oracle：NL_LANG MySQL：多个字符集相关变量 不同客户端程序最终查询的显示 Client JSP建议都设置成gbk或utf8Goldengate从入门到精通 讲师 顾铁军DATAGURU专业数据分析社区炼数成金逆向收费式网络课程 Dataguru（炼数成金）是专业数据分析网站，提供教育，媒体，内容，社区，出版，数据分析业务等服务。我们的课程采用新兴的互联网教育形式，独创地发展了逆向收费式网络培训课程模式。既继承传统教育重学习氛围，重竞争压力的特点，同时又发挥互联网的威力打破时空限制，把天南地北志同道合的朋友组织在一起交流学习，使到原先孤立的学习个