


下载本文档
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、datastage7.5.2.1问题汇总 datastage7.5.2.1问题汇总 2010-08-14 16:59 环境:red hat linux as 4 update 8 x86_64 + datastage 7.5.2.1 + oracle 10g x86_64 + ms sql server 2005 如果你使用datastage7.5.x来做etl,那么建议你先看下一ibm官方公布的已修正的bug, 先备份$dshome/etc/operator.apt文件,使用vi编辑该文件,将dscapiop dscapiop 1修改为dscapiop dscapiop 1,保存退出! 关闭
2、ds,重新启动!不知道为什么这么干!寻遍官方文档都没找到一点相关内容,上给出的解决办法,当前问题是解决了,但是依据是什么呢? 会不会因此而产生其他的潜在问题?! 在这里鄙视一下ds! 12.job排错,开启详细日志输出 日志提示有警告,可是不知道是哪个stage提示警告,那么设置apt_dump_score = true,可以在log的警告信息中看到stage名称。 另外,还有一些选项用于log日志输出。 内存使用情况,apt_pm_player_memory = true cpu使用时间,apt_pm_player_timing = true 数据抽取条数,apt_record_counts
3、 = true 13.ds性能调优 详见官方文档。 apt_default_transport_block_size = 131072 改为 apt_default_transport_block_size = 1048576 apt_buffer_maximum_memory = 3145728 (3 mb) 改为 apt_buffer_maximum_memory = 6291456 (6 mb) apt_buffer_free_run = 0.5 改为 apt_buffer_free_run = 0.6 14.ds运行中发现的oracle db的问题 ds运行时,log日志报错,竟然都是
4、tns和ora的错误,尤其是并行多个job时,有job失败。 请寻求dba协助,做数据库的优化! 15.ds中对oracle中特殊字符的处理(例如:# $) ds_enable_reserved_char_convert = true 处理特殊字符#,$ 16.transformer stage中的substr功能 transformer stage中的substr功能在抽取数据时,按字符对象截取字符,可是加载至目标库时,是按字节计算长度。 尤其是对含有中文的字段截取时,有些中文字符的最后一个字符被截成了乱码,在加载至目标表时报错, 可以在/home/dsadm/ascential/datastage/scratch文件夹下bad文件中找到出错的数据条目。、 建议: 对于含有中文的字段,目标表的字段长度尽可能的与源表字段长度一致。 17.从ms sql server 2005抽取数据至oracle时,中文乱码解决 nls为g
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 从理论到实践医疗安全培训的实效性研究
- 违规责任追究管理办法培训
- 社区静态管控培训课件
- 电阻电容电感元件企业县域市场拓展与下沉战略研究报告
- 无缝钢管(外购再加工)企业数字化转型与智慧升级战略研究报告
- 复合长丝纺丝卷绕机企业ESG实践与创新战略研究报告
- 直线移动式动力头机床企业数字化转型与智慧升级战略研究报告
- 电动工具企业数字化转型与智慧升级战略研究报告
- 啤酒酿造设备企业ESG实践与创新战略研究报告
- 可靠性试验设备企业县域市场拓展与下沉战略研究报告
- 煤矿标准成本消耗定额(定额装订版)
- 《骑鹅旅行记》阅读题(有答案,内容全)
- 【越南】环境保护法
- 《C语言程序设计》教案(清华谭浩强)
- ●粘度对离心泵性能影响最新标准初析及粘液泵选型经验
- 环己烷安全周知卡-原料
- 三宝证盟荐亡往生功德文疏
- YY∕T 1849-2022 重组胶原蛋白
- 行政管理工作流程优化方案
- 鼓式制动器毕业设计
- 医院内部医疗废物收集运送流程图
评论
0/150
提交评论