[转载]Informatica学习笔记

1、摘要：Informatica学习笔记1：UPDATEASINSERTInformatica学习笔记2：客户端连接服务器的问题Informatica学习笔记3：workflow的问题Informatica学习笔记4：Folder权限的问题Informatica学习笔记6：建立workflow的问题Informatica学习笔记7：workflow执行报错Informatica学习笔记8：提示joiner输入字段没有排序Informatica学习笔记9：import一系列mappingInformatica学习笔记10：复制数据库的问题Informatica学习笔记11：informaticase

2、rvices不能启动Informatica学习笔记12：从mysql抽取数据的字符集问题Informatica学习笔记13：没有Lincense导致的问题Informatica学习笔记14：lookup中自定义sql有问题Informatica学习笔记15：infopower如何实现增量抽取？Informatica学习笔记16：informatica8.1安装问题Informatica学习笔记17：如何在PowerCenter中实现累加SUMInformatica学习笔记18：PC8.1运行出错Informatica学习笔记19：多行记录合并问题Informatica学习笔记1：UPDATEA

3、SINSERT问：要求实现每天抽取数据，而且是如果有改变才抽取更新，没有就不更新，因为源表中有最后修改时间的字段，我让它和SESSION上次运行时间比较来解决是否抽取，但问题是有的表中没有主键，我该怎么实现更新呢？有主键的我在WORKFLOW的MAPPING里面勾上了UPDATEELSEINSERT那没主键的用UPDATEASINSERT行么？还有UPDATEASINSERT什么意思啊，能解释的形象点么？答：UPDATEASINSERT就是语句一：updatetab_namesetc1=value1,c2=value2wherec_prikey=value_pri语句二：insertintot

4、ab_namevalues(*)当在tab_name的c_prikey找到有等于value_pri的，就执行语句一把所有对应的记录update。当没有匹配的，就执行语句二。你可以powercenter的sourcedefination中的自己定义主键，也可以直接overrideupdatesql，可以不用理会真实表结构中是否有主键Informatica学习笔记2：客户端连接服务器问：我通过客户端连接到服务器,做了一个workflow,运行的时候出现错误,说是服务器连接不上repositoryserver和infomaticserver他俩的port是不是要一样还是不需要？答：看看server的

5、配置.我想可能是没有配置好.问：Repositoryserver服务起来了,就是informaticaserver起不来了,在配置的时候,是informaticaserver的ip解析不出来,怎么才能把那个地址和主机对应起来答：1.直接写IP2.编辑客户端的%WINDOWS%/SYSTEM32/DRIVERS/ETC/HOSTS文件，把ip与名字的对应关系加进去，客户端这台机器就可以自己解析了3.找DNS或者什么解析服务器搞定。问：informaticaserver装在unix操作系统下，能不能找到配置informaticaserver的配置文件对应的是那一个文件.答：unix下缺省是pmse

6、rver.cfg，可以用pmconfig这个命令行工具修改配置文件，也可以直接打开编辑。如果不是缺省的配置文件名可以通过,ps-efl|greppmserver看看是哪个文件名。问：谢谢,pmserver.cfg这个文件中的配置信息我看过了,里面设置的都是repositoryserverip:和port:6001,怎么找不到配置的informaticaserver的ip:和port:4001我是想知道这个信息在配置文件中能找到吗?答：这个是在workflowmanager里面注册的。双击server名字就看得到了。问：是的，我在workflowman

7、ager里看到过,只要在那里注册好了就行了吗，我想它应该存放在什么位置所以想搞清楚,还是谢谢你.答：他存放在策略库的opb_server_info表里面，呵呵。你也可以试试看直接改数据库。不过直接改数据库这种事情要悄悄的干，被david知道了要打pp的。Informatica学习笔记3：workflow问题问：创建一个工作流从一个txt文件到目标表，是不是要定义.par参数文件有没有谁有这方面的资料教程，给我发一份，非常感谢！我创建了一个，运行的时候出错了：(Server10)Startworkflow:Requestacknowledged(Server10)Startworkflow:ER

8、ROR:Errorinstartingexecutionofworkflowid=8wf_s_m_test.Pleasechecktheserverlogformoreinformation.答：没必要非得定义参数文件,直接在session中,指定路径和文件名就行.如果是同结构批量的文件,可以用filelist功能.参数文件也能作,相对来说是在外部控制路径和文件名,比较动态了.那个错,不是让你去看serverlog吗.去看看了.window平台,default去看事件管理器Informatica学习笔记4：Folder权限的问题问：Informatica用不同的用户创建的不同的folder，互

9、相看不见是什么原因那？答：保护机制的作用，建folder的时候，在安全选项里可以设置！把read权限赋给repositoryuser就可以了也有可能是启用了versioncontrol的原因Informatica学习笔记5：建立Repositories的时候出错问：我的Infromatica是安装在英文版的Windows环境下的，Matadata要放在Oracle9i中，可是当我在建立Repository的时候怎么也连接不上我的Oracle9i数据库，而我用其他方式连接数据库是畅通的，在Windows的事件查看中看到如下信息：(368|752)Failureinrunningcommand-l

10、inerequesttype100401pmrepagentcreate-rTCS-tOracle-uinformatica-cOradb-dMS1252-htcs-china.db-o9999-Htcs-china.db-O5001-K2082340862.ErrorisAnerroroccurredwhilecreatingtherepository.答：建repository在RepositoryServerAdministrationConsole里面可以找到ActiveLog的，可以看看出错信息，出错多的好像都是插入一个LONG的值，通常建策略库出问题都是字符集捣的鬼，几个地方要注意

11、数据库的字符集，系统NLS_LANG环境变量，操作系统的缺省字符集(windows在地区设置里面看，还有缺省输入法也可能影响)，理论上不同的字符集只要是可转换的，都是可以的，不过弄成一样的比较简单了。问：谢谢guruhao的提示和帮助，我决定将Oracle和Informatica重新安装一下再来测试一次，我的操作系统的缺省字符集(windows在地区设置里面)是china系统NLS_LANG环境变量是N/A答：这一段都是正常的，droptable不成功，属于建库之前清理表的动作，还要往后，大约在中间的位置。有个真正的插入数据的错，你最好设置一下NLS_LANG使之与oracleserver的字

12、符集相匹配。itshouldbeOraclecharactersetisnotsameinOracleServerandclient.Informatica学习笔记6：建立workflow的问题问：我用powercenter8建立一个mapping后，在workflowmanager中建立了workflow，但是运行这个workflow时却提示以下错误信息:CouldnotstartexecutionofthisworkflowbecausethecurrentrunonthisIntegrationServicehasnotcompletedyet我检查了一下：server中的各服务已经正常

13、启动了，但是就是运行时出现这种情况，请问是什么原因导致的？以及怎样解决呢？各位知道的就请说一下吧。答：该错误应该是说你建的这个workflow正在运行，且还没有结束，因而你不可以再次启动该工作流。你可以通过Monitor观察一下。问：该错误应该是说你建的这个workflow正在运行，且还没有结束，因而你不可以再次启动该工作流。你可以通过Monitor观察一下。但是我在monitor中又看不到任何的session在运行啊答：将你的informaticaserver在service里重新启动后再运行看看（问：过一阵子之后再运行就正常了。不知道为什么？怪怪的）Informatica学习笔记7：wor

14、kflow执行报错问：我在执行某个workflow的时候报了如下错误：FATALERROR:UnexpectedConditioninfile/u05/bld65_64/pm713n/server/dmapper/widget/wjoiner.cppline3176.ContactInformaticaTechnicalSupportforassistance.AbortingthisDTMprocessduetoanunexpectedcondition.请问各位这是什么原因？我看了一下日志文件，好像是初始化的过程都还没有结束就报错了。答：ThiserroroccurswhentheJoin

15、ertransformationinthemappinghasbecomecorrupted.Toresolvethisdooneofthefollowing:1.Deleteandre-createtheJoinertransformation.2.Exportandimportthemappingreplacingthemappingwhenimportingit.谢谢！找到原因了，原来是某一个字段的连接线没有连上导致的错误。可是我有个疑问，为什么有的控件出现这种情况的时候就没有问题呢？Informatica学习笔记8：提示joiner输入字段没有排序问：我们这里是异地开发，从北京拿过来的

16、mapping，在那里都可以跑通，而且没有任何问题，但是怎么拿到我这里就提示joiner输入字段没有排序呢？问题可能发生在什么地方呢？答：你的join控件应该是来自同一个数据源的，你在join控件前增加一个Sorter控件，将join的输入数据源排序。Informatica学习笔记9：import一系列mapping问：求教，要import一系列mapping，但是codepage不一致，应该怎么调整？答：codepage不一致,一定得改.反正一个XML,只需要改两个地方.如果XML很多,写一个小程序,会方便点.如果少,手工改一下就好了.一系列的xml?是指很多,是吗?1.建议你在导出时,用r

17、epmanager,将很多对象打一个包导出.2.pmrep命令行,有个objectimport功能,写一个批量的.bat导了Informatica学习笔记10：复制数据库的问题问：请教各位大侠：我要用PowerCenter复制一个数据库，源库是一个SQLServer的数据库，目标库是DB2数据库，请问怎么做？答：一个表一个表的做。如果想一次复制所有表，干脆用SQLserver的DTS好了。如果是整个库的话,不如用DBimport/export了.ETL强调的是T.Informatica学习笔记11：informaticaservices不能启动问：环境：在一台机器上安装了informatica

18、servicesclientoracle10g（作为repository)。informatica的版本是8.1.1，启动informaticaservices时没有错误，但是过几分钟就停了。日志信息catalina.out如下：2006-11-2816:12:46org.apache.coyote.http11.Http11Protocolinit信息:InitializingCoyoteHTTP/1.1onhttp-60012006-11-2816:12:46org.apache.catalina.startup.Catalinaload信息:Initializationprocessed

19、in1234ms2006-11-2816:12:46org.apache.catalina.core.StandardServicestart信息:StartingserviceCatalina2006-11-2816:12:46org.apache.catalina.core.StandardEnginestart信息:StartingServletEngine:ApacheTomcat/5.02006-11-2816:12:46org.apache.catalina.core.StandardHoststart信息:XMLvalidationdisabled2006-11-2816:12:

20、47org.apache.catalina.core.StandardHostgetDeployer信息:CreateHostdeployerfordirectdeployment(non-jmx)2006-11-2816:12:47org.apache.catalina.core.StandardHostDeployerinstall信息:ProcessingContextconfigurationfileURLfile:c:InformaticaPowerCenter8.1.1servertomcatconfCatalinalocalhostadminconsole.xmljava.lan

21、g.UnsatisfiedLinkError:D:InformaticaPowerCenter8.1.1serverbinpmjrepn.dll:?前几天一直运行正常，请问各位高手，该问题如何解决，谢谢！答：Thiserrorwilloccurwhenthereisthereisanincompatiblexerces-c_2_4_0.dllfileontheWindowsmachine.Toresolvethisdothefollowing:StoptheInformaticaServicesWindowsservice.GototheC:WINNTsystem32directory.Ren

22、amethexerces-c_2_4_0.dllfiletoxerces-c_2_4_0.old.dll.Copythexerces-c_2_4_0.dllfileintheserverbindirectorytotheC:WINNTsystem32directory.istheInformaticainstallationdirectory.Re-starttheInformaticaServicesWindowsservice.Tryitagain,pleaseletmeknowtheresult.Informatica学习笔记12：从mysql抽取数据的字符集问题问：我们的source数

23、据库是mysql,字符集是utf8.现在要用informatica从中抽取数据并生成文本，用于下一步的ETL处理。informaticaserver的codepage是ISO8859-1.结果中文字符总是抽取不成功。请问如何处理才能正确抽取中文字符？答：informaticaserver的codepage是ISO8859-1,你得改成UNICODE的模式,才可以比较适合作转换.你在workflowmanager中的那个ODBC的连接,应该也有codepage的设置吧.改改试试.问：informaticaserver的codepage是ISO8859-1,你得改成UNICODE的模式,才可以比较

24、适合作转换.你在workflowmanager中的那个ODBC的连接,应该也有codepage的设置吧.改改试试.谢谢斑竹。问题是我没办法去改informaticaserver的配置。如果就用当前配置，有可能做到正确抽取中文么？能够做一些编码的转换来实现么？答：乱码,就找几个点的码制设定了.源就那样了,ETL服务器上配的ODBC,可能会有codepage相关;再就是ETL服务器,你已设为ISO8859-1,如果不对中文数据作转换,应该不会乱;workflowmanager中,配置ODBC我忘了是不是也有codepage设定了.就这么几块.你分开检查一下了.你用个什么工具,通过系统ODBC去访问

25、一下,如果看到的不是乱码,再从后面几点排这个错了.（修改了连接mysql的odbc,加上stmt=SETNAMESutf8就好了，谢谢斑竹！）Informatica学习笔记13：没有Lincense导致的问题问：各位兄弟们帮忙看一下，informatica的问题，我使用的是6版本，目标数据库是oracle10g,在安装好，配置好的时候，执行workflow的时候报这样的错误CMN_1022Databasedrivererror.CMN_1022MicrosoftODBCDriverManagerDatasourcenamenotfoundandnodefaultdriverspecifiedD

26、atabasedrivererror.FunctionName:ConnectDatabasedrivererror.FunctionName:ConnectDatabaseError:Failedtoconnecttodatabaseusingusertest_locandconnectionstring2.答：你用的是ODBC.是UNIX下,还是window?为什么不用Oraclenativedriver?这个看起来,像是你在系统建的ODBC,没有找到.你在系统的ODBC,建立一个连接,例如:odbc_ora_hr,测试一下,看是不是能连接到远程的oracleserv

27、er.你在workflowmanager中,建立ODBC时,那个connectstring写上这个名字.odbc_ora_hr如果在系统的ODBC是通的,应该就可以了吧.问：ODBC用的是informatica自带的odbc安装的，用的是window的，我也想用oracle的驱动，但是我没有oracle的Lincensekey，我只有odbc的所以只能用odbc的了，系统odbc配置的图和workflowmanager中配置odbc的图和你说的一样，配置好后，报的错误还是一样的，急死了答：问题解决了,是key有问题!艾！没有informatica的LincenseInformatica学习笔记

28、14：lookup中自定义sql有问题powercenter7.1windows平台sourcetablew_test_fstargettablew_test_f源表和目标表中都有字段col1和col2,这两个字段可以看作是联合主键吧建了个uniqueindexmapping流程大概说一下1.从源表取数据selectfs.col1,fs.col2,fs.xxx,.fromw_test_fsfs2.建lookup(从w_test_f)，in的字段就是上面select出来的col1和col2,比较字段是w_test_f中的col1和col2,取出w_test_f中的主键selectf.row_id

29、,f.col1,f.col2fromw_test_ff,w_test_fsfswheref.col1=fs.col1andf.col2=fs.col23.建filter,把lookup找出的lookup_row_id和步骤1选出的字段传给此filterfilter条件是isnull(lookup_row_id)4.进入目标表现在的问题是：源表和目标表数据条数是一样多了(之前跑过，那时目标表是空的)就是说对于col1和col2来说，两个表是一样的用sql可以验证selectfs.*fromw_test_fsfswhere(selectf.row_idfromw_test_ffwheref.col

30、1=fs.col1andf.col2=fs.col2)isnull;执行这条sql查出0条记录但我运行上面的mapping还是有数据流过filter遇到过有部分数据流过(filter起了部分作用)、也遇到过数据全部流过(filter没起作用)当然对应的mapping是不一样的我上面的mapping只是个例子规则是一样的请问大家遇到过或者有什么建议没有？答：已找到部分原因lookup中自定义sql有问题Informatica学习笔记15：infopower如何实现增量抽取？问：在informaticapowercenter中如何实现增量抽取？我想了一下使用时间戳，但是这个时间戳如何去使用不是很明

31、白，希望各位高人在这边能指点一下，如果有例子更好，在这里先谢谢了！答：有时间戳就直接用呗，总有个办法记录上次抽取的时间的，也有办法设置本次的截止日期然后wheretimestamplast_timeandtimestampTO_DATE($LastUpdateDateTime)ANDSALES.sales_datetimeStoreValuesAcrossRows。想了想，在aggregator里面用cume遇到不同的groupby条件后，应该是可以自动清0的，所以还是用cume简单些。我觉得cume能实现,实在不行,一次只处理一年的(这样考虑的东西少,最简单),用参数控制一下where子句.

32、实在不行,可以考虑,将地区,年,月,合成一个字段.这个咋都能作.能作的方法有多种.但我觉得这种最简单.问：我现在目前就是只处理一年的，上午我试了下，用cume是可以的做的，但是以后肯定是不止一年的数据。还有David说：”把地区，年，月合成一个字段，这咋都能作“，我有点不理解，能具体一点点吗？答：字符串与呀.我觉得还是一年一年处理比较好.你可以作一个session,用参数来控制where子句,每次作一年的.你用外部一个程序控制改变这个参数,并多次执行(pmcmd).这样比较简单.我知道把地区，年，月合成一个字段是字符串与，我的意思是说：把地区，年，月合成一个字段后，在我做累积SUM的时候怎么来

33、用，为什么这样就可以”咋都能作“了？不好意思，刚刚没讲清楚。:)再用cume呀.Informatica学习笔记18：PC8.1运行出错问：:confused:版本PC8.1用了一个最简单的例子，就源和目标的一个一一映射。应该说不会是流程的问题和参数设置问题。运行后错误日志如下：Message:*FATALERROR:UnexpectedConditioninfileZeusbuilderProductionviewpowrmartcommonodloracle8oradriver.cppline241.ContactInformaticaTechnicalSupportforassistanc

34、e.AbortingthisDTMprocessduetoanunexpectedcondition.*怀疑是不是PC8.1文件被破坏了，请各位高手指点一下可能会是什么问题？答：你的这个问题,不是找到原因了吗.减小sorter的cache或增大swapspace.看着像是ODBC方面的问题。两个建议：1.重启机器，试一下。有时安装完，没有重启，有些变量没有生效，会报这类问题。2.请用DataDirectODBC，重新导入源和目标结构，再作一个简单的例子，试一下。问：建议：1，我的PC8已经安装很久了（不过lisence还没过期，改过系统时间啦），所以呢机器已经重起很多次啦，应该不是这个问题2，源和目标也重新导过，一样报错，另外我不管哪个task都是报这一样的错，所以应该不是某个组件的参数设