省BI常识及数据核查

1、省BI常识介绍及数据核查,潘承,BI常识,什么是BI，为什么要BI BI是business intelligence的简称，我们现在所做的广东移动经营分析系统面向的直接客户是广东省移动。主要有两方面的功能，一是预测功能，根据数据变化的趋势预知经营目标是否可以实现。第二个是考核功能，对数据按需要的条件进行各维度的汇总统计。此外还包括有配合中国移动集团公司（一经）和各地市分公司开展工作的功能。,BI常识,计费实时清单文件TO_CDR(TS_CDR) 关于时间 CALL_DT：用户的通话日期 DEBET_DT：计费的批价日期，和实时清单文件名中日期对应，每地市每15分钟一个批价文件。清单中IMEI字

2、段的最后3个数字对应于清单文件序号。 TM_INTRVL_CD：BI统计日期，一般由存储过程IN参数传入，或者取自源表的TM_INTRVL_CD 关于类型 BUSI_TYP_CD：业务类型，有REF.TR_BUSI_TYP对应 DIR_TYP_CD：方向类型，有REF.TR_DIR_TYP对应 FEE_TYP_CD: 费用类型，有REF.TR_FEE_TYP对应,BI常识,PRDCT_CD：产品类型，有REF.TR_PRDCT对应 ROAM_TYP_CD：漫游类型，有REF.TR_ROAM_TYP对应 TOLL_TYP_CD: 长途类型，有REF.TR_TOLL_TYP对应 IN_ROUTE_

3、CD: 入路由，涉及SP的清单，前6位对应SP企业代码，与ODS.TO_SP_CODE对应 B_NBR: 对方号码，涉及SP的清单，对应SP服务代码，与ODS.TO_SP_SERV对应 ROAM_NBR: 漫游号码，涉及SP的清单，对应SP业务代码，与ODS.TO_SP_SUBBUSI对应 LOCAL_CD,CELL_CD: 位置、小区代码，与REF.TR_CELL对应,BI常识,关于时长、费用 CALL_DUR ：时长，语音通话的时间，单位秒 CALL_CNT ：次数，业务的次数 CALL_FLUX：流量，数据业务的流量，单位KB TOLL_DUR ：长途时长,由通话时间按6秒倍数得到，单位

4、秒 DISC_MOB(TOLL、INF)_FEE：二次批价的费用，BI所用 基于实时清单文件的骨干表 用户日通话信息表EDS.TW_USRCALL_DAY_YYYYMM 每天对21个地市清单信息汇总，不分号码,BI常识,业务量日统计表 JFDM.TM_BUSI_USE_DAY 每天对日通话信息表进行汇总,不分本方和对方AREA_CD 用户月通话信息表EDS.TW_USRCALL_MO_AAYYYYMM 每月分别对21个地市清单信息汇总，号码级 用户消费层次资料表JFEDS.TW_USR_CNSM_RNK_AA 每月对月通话信息表和销帐日志表费用汇总，号码级 两个重要字段：通信用户标识CALLU

5、SR_IND,考核用户标识VAL2_USR_IND 日累计通信量与话费表TO_DUR_FEE_DAY_YYYYMM 每天统计号码的累计费用和折算话费以供后续统计每天的通信用户数和考核用户数,BI常识,最新通信用户情况表ODS.TO_CMNCT_USR 每天根据清单表取得新号码或者更新已有号码的状态 合作服务方日通话信息表EDS.TW_CMPTCALL_DAY_AAYYYYMM 每天根据清单表的对方号码取新号码 联通语音用户资料表 ODS. TO_UNI_VOCUSR 每天根据合作服务方日通话信息表取得新号码或者更新已有号码的状态 合作服务方最新用户资料表ODS.TO_CMPT_USR 每天根据

6、合作服务方日通话信息表取得新号码或者更新已有号码的状态,BI常识,用户小区信息月汇总表 EDS.TW_CELL_USE_MO_AAYYYYMM 每月对清单按位置代码、小区代码进行汇总，号码级 用户新业务使用情况日统计表EDS.TW_USR_NBUSE_DAY_AAYYYYMM 每天对清单表中增值业务记录做号码级汇总 NEW_BUSI_CD区分各种数据业务类型 帐单文件 客户帐单ODS.TO_CUST_BILL_AA 数据来源于区域BOSS FEE_ITEM_CD:费项编码，有REF.TR_FEE_ITEM对应,BI常识,客户月消费 EDS.TW_CUST_CONSUME_YYYYMM 每月对B

7、OSS帐单按用户汇总 MO_AMT_FEE:当月总费用 计费月帐单 ODS.TO_DEBT_BILL_AAYYYYMM 数据来源于计费 BILL_TYP_CD:帐单类型，查旧计费系统接口文档说明 用户 最新用户资料表 ODS.TO_USR 数据来源于区域BOSS USR_STS_CD：用户状态编码，与REF.TR_USR_STS对应 包含割接地市的智能网用户资料,BI常识,最新智能网用户资料表 ODS.TO_IUSR 数据主要来源于智能网 IUSR_TYP_CD：用户类型编码，与REF.TR_IUSR_TYP对应 IGROUP_NO , TAOCAN_TYP ：确定号码的子套餐类型 CZ,HY

8、,HZ,JY,MZ,ST,SW的动感地带资料在ODS.TO_USR中 FS,ZH的动感地带数据来源于IBOSS JM的动感地带数据来源于OCX 历史集团用户资料表 EDS.TW_GUSR_YYYYMM 数据主要来源于每月的用户资料月全量和集团产品关系月全量 根据产品维表限制为集团产品类型，非个人产品类型 USR_NBR：用户号码，对应于集团产品号码,BI常识,号码服务功能 用户定制功能表 EDS.TW_USR_FUNC_YYYYMM 数据来源于区域BOSS，用户ID 包含割接地市的智能网用户定制功能资料 智能网号码服务功能关系表 EDS.TW_IUSR_FUNC_YYYYMM 数据来源于区域B

9、OSS，用户号码 智能网用户定制功能资料,BI常识,集团业务 标准化产品数据表 EDS.TW_CORP_STDPRDCT USR_VALID_IND：集团用户有效标识 成员到达数据来源于EDS.TW_CORP_PRDCT_MEMBER_YYYYMM 收入数据含两部分：标准化产品的帐单收入以及集团产品的成员收入 行业应用数据表EDS.TW_CORP_INDAPPLY_DATA 数据通过服务代码在清单和计费帐单统计,BI常识,作业调度 GDBI02GDBI代码08配置数据调度配置DSS配置文档.xls JOB_PARAM_DEF：作业参数定义 JOB_REF：作业依赖 JOB_TIME_REF：作

10、业时间依赖 TA_ETL_DS_DEF：ETL数据源定义 Showref工具 参数0和3：查询作业是否完成 参数46：查前续作业 参数78：查后续作业,BI常识,/ch1_cx/etl/dssprog/checkpoint Job_event.dat：作业事件，记录已完成的作业依赖 Job_queue.dat：作业队列，记录正在等待系统分配资源作业 作业运行情况表CTL.JOB_INST_1 INST_STATUS=0代表出错, 1是完成, 2是正在运行 记录装载情况表CTL.TA_ETL_ERR_LOG PROCESS_STEP：1代表清洗，2代表转换，3代码装载 SOUR_RECORD：源

11、文件记录数 SUCCE_RECORD：成功记录数 FAIL_RECORD：失败记录数，与对应数据源目录下的.rej文件对应，错误原因在.exp文件中有描述,BI常识,转换表REF.TT_BOSS_REF DIM_CD：转换序号，查相关的转换程序可以知道数据源编码和BI转换编码的对应关系，常用的如CMCC_BRANCH_CD：34,FUNC_CD：14，FEE_ITEM_CD：28 S_CD：源代码 D_CD：目标代码,数据核查步骤一,明确申告所指 经分系统页面路径或者导出文件名称 例如KPI-市场竞争-日-本月累计通信考核客户 新版共享文件夹-个人业务-AA-VALUSR-M-ValUsr_new_YYYYMM_AA 地市、数据日期、数值 申告原因 例如数据未展示，数据为0 数值突减、突增,数据核查步骤二,从数据库中得到对应的申告数值 通过前端测试机（10.200.4.119:9080）的XML得到SQL语句条件 通过GDBI代码03一经代码配置数据GIF.TYJ_EXPORT_JOB_DEF.TXT得到生成导出文件的SQL语句 通过SQL条件语句从库表中得到展现的数值以明确申告所指的字段 改变数据日期、地市、品牌等条件得到对比数据,数据核查步骤三,分析原因 差异原因 通过GDB