数据业务监测与分析系统材料

2012年数据网管本地改造工程－数据业务端到端管理部门方案汇报发展计划部2012年6月目录CATALOGUE需求分析及建设方案2项目背景1项目投资预算3项目建设计划4端到端系统建设情况20092010.82011.7至今一阶段完成二阶段完成完成集团建设项目启动2012.8项目建设历程目前系统应用效果业务部门(市场部、数据部)：已具备针对业务、网站、终端和区域的基本分析能力，可了解用户业务喜好，掌握对各类终端在网络上表现，掌握各个市场区域的业务发展情况。运维部门（网络部、支撑室、新业务室、技术支援室）：已具备对核心业务的业务质量监视分析能力，掌握各业务承载质量，快速定位质量问题出现在流程的哪个阶段。优化部门（分析优化室）：已具备对2G和TD网络下的流量流向分析能力，对2G和TD网络协同发展建设，对掌握全网业务分布和发展情况提供参考依据。本期建设完成本项目建设情况2009年，河北省移动公司启动了端到端系统工程建设，经过省内一期、二期建设之后，数据业务端到端已经实现了业务流量分析、业务质量分析、用户分析和资源容量预测等四大功能。2011年，中国移动集团在省内建设的基础上，启动新的建设工程，增加对业务分析和用户可视化等功能的建设，强化网络业务维护的支撑能力。集团建设方案偏重于业务维护支撑能力的建设，在支撑流量经营的综合解决能力尚纯在不足，无法满足河北本地提出的基于多维度、多业务的全面分析需求。因此，本次项目将在集团系统的框架基础上，结合河北在流量经营工作中的实际需求将本系统的市场分析、经营支撑能力进行强化。端到端系统的能力定位端到端实现用户上网的5W1H可视化：who(什么样的用户)\where（在什么场所）\when（在什么时间）\what（使用何种业务）\how（用户业务感知如何）\why（是何原因影响）端到端系统通过实现多系统接口方式将各分散的系统从业务、网络的角度进行有序的整合，为“流量经营”提供可靠的视图依据（网络地图、终端地图、应用地图、流量地图、投诉地图）。集团方案建设后，数据接入情况满足本次的建设需求，本期无需新增额外采集机房名称GPRSGn接口CMNET省网出口WAP网关出口石家庄东风路全球通大厦四层数据机房全部石家庄开发区枢纽楼三层六区数据机房全部全部保定清苑三层机房全部保定金迪路五层机房全部邯郸移动大楼四层机房全部唐山天元七层数据机房全部沧州移动大楼二层数据传输机房全部部分无廊坊移动大厦七层全部石家庄青园街机房部分集团方案建设后，所有Gn口全部覆盖，完整采集全省2G、3G流量；但不涉及其它口采集。集团整体构架满足本次项目需求，本期项目在集团构架上实现汇聚设备采集服务器1采集服务器2SGSNGGSN机房1汇聚设备采集服务器1采集服务器2SGSNGGSN机房N传输专线管理服务器应用服务器交换机云分析服务器省监控中心集团建设方案，采用省集中处理模式，所有的CDR数据全部上传到省监控中心（石家庄东风路全球通大厦四层数据机房？）。

省监控中心，分析服务器采用“云架构”，以应对大数据量集中处理。CDR交换机交换机……本期系统数据接入情况集团建设方案完成后—主要实现功能实现五大功能和PCC的关系成为PCC构架的“大脑”，起到策略生成及效果监测的作用目前已实现：实现用户、业务、终端、网络的数据收集和分析；实现实时业务监测能力。下一阶段规划（集团已经在制定相关接口规范）：实现标准化的外部接口，为PCRF、BOSS提供分析数据支撑业务对流量经营的支撑情况端到端系统已满足的支撑内容数据范围数据内容GPRS上网日志WLAN上网日志WAP网关日志个人有线宽带上网日志专线上网日志其它上网日志手机号／账号位置信息终端设备信息访问业务上网时间／时长上网流量上网URL地址上网内容相关配置信息路由选择信息业务成功率业务时延业务使用速率网络性能信息网络选择信息业务状态原因业务流向信息终端用户网络目录CATALOGUE需求分析及建设方案2项目背景1项目投资预算3项目建设计划4集团建设方案－无法满足河北本地需求能力建设集团建设功能主要差距支持情况业务流量可视化业务分析好

业务流向可视化业务流向分析较好业务质量可视化信令层业务质量分析、业务层业务质量分析需要实现全业务的无线网络占用效率分析一般

营销目标可视化无需要实现分业务的市场渗透率分析、业务价值分析差

市场形态可视化区域分析、用户群组分析需要针对区域、终端、用户类型、业务类型进行多维度关联差用户行为可视化用户业务分析需要增加对用户业务使用习惯的分析差集团方案建设后对数据流量经营支撑能力的改善集团建设方案目标与河北本地需求目标差距方案特点：偏重于业务维护支撑能力、业务流量可视化、业务流向可视化能力的建设。目标差距：无法满足流量经营所需的多维度联合统计分析需求。分区域[场景][类型]的终端分析分运营商和省份的业务/网站分析分网元/终端/区域的业务质量分析分区域[场景][类型]的业务分析分业务/终端/区域的并发用户数分析需要多维度的联合统计分析营销目标市场形态用户行为能力对比分析图本期项目建设内容总体需求及建设思路为更好的将端到端系统（Gn信令分析与监测系统）与河北流量经营的战略目标结合起来，在基于集团建设规范框架的基础上结合河北五张战略地图的指导思想，对端到端提出了更高层次的建设要求；本期本地化工程建设将以支撑战略地图为目标进行。地图类型本期建设内容网络地图监测全网Gn接口，实现G+T网全监测，实现TD覆盖区域内的终端、网络使用情况分析；实现G、T网网络质量（FTP、TCP/IP）对比分析终端地图实现：分区域和区域类型的终端分析、分操作系统的终端分析、分智能手机和非智能手机分析、智能终端在线时长分析、分终端的网站分析、基础网络指标和业务质量指标的分终端分析；流量地图实现：专用APN用户号码和IP地址分析、专用APN异常流量分析、专用APN业务利用率分析分市县农的业务分析、分场景的业务分析、分运营商和地理位置的业务流向分析、分运营商和地理位置的网站流向分析应用地图实现：分市县农的业务分析、分场景的业务分析、业务并发用户数分析、网站并发用户数分析、终端并发用户数分析、热点小区并发用户数分析，投诉地图实现：投诉智能诊断、网络智能诊断、多维度综合跳转分析由于现有方案中已部署的10台分析服务器的计算能力可最大满足12Gb数据的同时处理，本次项目由于增加分析维度关联后所需要的计算能力为4Gb，原部署的计算能力足够满足需求，不需要进行计算能力的扩容。采集服务器、应用服务器和数据库服务器没有产生变化，因此保持不变。建设方案—硬件部分（本地需求）分析维度增加，需要存储的报表数据呈几何线数增长，磁盘存储需求新增350TB。目前集团项目中服务器可携带存储为磁盘数为：480块，目前集团项目已用197块1TB盘，剩余283块盘空间；如按单盘2TB算，扩容后剩余空间为：216TB，按单盘3TB，剩余498TB。因此，不需要额外增加服务器资源，仅需要扩充存储和磁盘柜。每磁盘柜可携带24块硬盘，占用空间2U，耗电330W；如按单盘2TB计算，本期项目需新增磁盘柜8台，空间16U,耗电2640W。如按单盘3TB计算，本期项目需新增磁盘柜5台，空间10U,耗电1650W。本期工程增加多种统计维度，并支持多种统计维度的联合统计分析，以满足市场、运维和规划的数据分析需求。功能类别类别子功能功能类别类别子功能集团功能增强部分流向专题分析分运营商和地理位置的业务流向分析河北本地新增部分并发用户数专题分析业务并发用户数分析分运营商和地理位置的网站流向分析网站并发用户数分析终端专题分析分区域的终端分析终端并发用户数分析分区域类型的终端分析热点小区并发用户数分析分区域场景的终端分析专用APN分析专用APN用户号码和IP地址分析分操作系统的终端分析专用APN异常流量分析分智能手机和非智能手机分析专用APN业务利用率分析智能终端在线时长分析IP地址配置冲突检测分终端的网站分析WLAN分流引导用户筛选基础网络指标分终端分析WLAN热点与基站匹配关系计算业务质量指标分终端分析短信推送自定义小区主题分析自定义小区终端分析接口服务静态资源信息自动同步自定义小区业务分析APN地址池Telnet采集接口自定义小区价值分析端到端系统与综合监控系统接口区域专题分析分市县农的业务分析经分接口分场景的业务分析

维护支撑专题投诉智能诊断网络智能诊断多维度综合跳转分析业务优化支撑专题IM无线信道占用分析每M流量空口占用时间和信令连接数分析FTP业务质量分析TCP及IP传输质量分析针对特定目的IP的用户分布区域分析针对特定业务的用户分布区域分析TD覆盖区内的终端类型占比分析TD覆盖区内的网络使用情况分析分区间的流量分布统计分区间的有效时长分布统计分小区的用户上网流量分析分小区的单信道速率分析DNS质量分析建设方案—软件部分（本地需求）基于前期河北公司在端到端系统实际应用中的问题反馈，结合河北本地实际的维护工作要求，在集团已有规范的基础上，考虑对部分集团规范内容的功能点进行升级改造。另：为了使端到端系统更好的结合“流量经营”课题的开展需求，新增了：“专用APN分析”、“WLAN分流引导”、“并发用户数分析”、“业务优化支撑专题”以及接口服务功能。建设方案—建设后系统软件架构基于GPRS、WAP网关出口和CMNET省网出来流量分析；主要实现了业务流量分析、业务质量分析、用户分析和资源容量预测等四大功能。现有端到端项目本期项目建设后现有端到端项目集团流量分析项目资源容量预测业务流量分析业务质量分析用户分析维护支撑专题投诉处理专题Gn口采集全部基于GPRS流量分析；偏重于业务维护支撑能力、业务流量可视化、业务流向可视化能力的建设，比现有端到端系统功能更强大。集团流量分析项目优化支撑专题网络质量分析系统管理功能WLAN分流引导接口服务并发用户数分析专用APN分析主要基于GPRS流量分析；与河北流量经营的战略目标相结合，在集团建设规范框架下，以支撑“网络地图、终端地图、流量地图、应用地图和投诉地图”等五张战略地图为目标进行建设。本期项目建设后终端专题分析自定义小区主题分流向专题分析区域专题本期升级功能后本期新增功能本期项目提升效果模块功能集团项目完成后河北本期项目完成后提升效果业务流量分析基于区域、终端、用户和业务等维度的流量统计仅能完成地域、终端品牌、终端型号、业务类型等维度的统计新增加区域类型、区域场景和运营商等多种统计维度，同时支持多维度关联分析实现多维度的联合统计分析和灵活跳转分析业务质量分析各类业务的速率、时延、成功率和失败原因分析仅支持WAP、HTTP和彩信等业务的质量分析可实现移动全部自有业务的质量分析可分析的业务范围扩大到全部自有业务网络质量分析基于网元、地域、终端和APN等维护统计网络质量仅支持对PDP消息的网络质量分析可实现针对PDP消息、TCP重传率和信令连接次数的网络质量分析可分析的网络指标更全面投诉处理专题用户详细记录查询、异常行为分析、用户感知分析仅支持用户详细记录的查询和用户感知分析可实现用户的异常行为分析和智能诊断定位可实现投诉智能诊断定位维护支撑专题实时KPI监控、会话实时跟踪、GIS展现仅支持单方面的网络KPI监控和统计分析可针对网络质量和业务质量进行多维度的跳转分析可按网元进行整体智能评估和诊断定位优化支撑专题异常行为分析、IM无线信道占用分析、网络性能分析、终端软件分析仅支持异常行为分析、QQ无线信道占用分析完成对所有IM软件的无线信道占用分析，增加网络性能分析、终端软件分析深入、全面的优化支撑能力WLAN分流引导用户筛选、WLAN热点与基站匹配关系计算、短信推送无此功能实现WLAN用户的精确挖掘和引导可引导用户使用WLAN接口服务静态资源信息自动同步接口、综合监控系统接口、经分接口等无此接口可实现静态资源信息的自动同步更新和相关分析指标的自动上报数据更准确、更及时本期项目建设后的预期成果——实现业务-用户-网络关联从业务、网站、终端、小区维度对业务并发现象进行分析；对高并发的业务小区进行重点分析和监测；提升网络承载能力，减少网络故障爆发隐患。分析并发用户终端特性监视智能终端分析并发用户所处小区提升网络容量分析并发用户所关注的业务和网站，提升网络支持能力从业务端到端的角度分析并发用户对网络、业务质量所带来的影响。永久在线用户冲击网络的本质是提高了区域内的并发用户数，使其超过网络承载能力案例一：实现对永久在线业务的影响监测智能终端的性能差别带来了用户业务体验的差别，需要建立完善的终端分析机制，了解现网中智能终端的分布情况以及业务感知情况，并针对不同区域下的不同终端用户进行深入的研究和分析，为市场发展提供策略支持。2012年4月河北移动智能手机市场不同操作系统比例分布IPHONE对自有业务的弱支持，进一步吞噬了移动自有业务的生存空间2012年3月河北本地TD终端发展情况本期项目建设后的预期成果——实现业务-用户-终端关联案例二：实现河北本地终端质量报告流量经营支撑系统间的区别（位置调整，说明现有系统是否能实现VGS的功能，如能实现，比较造价）结果：在集团未明确时，谨慎上VGS系统。或相反的结论编号功能点功能描述端到端系统VGS备注所处位置

GnGi

VGS目前仅在东风路GPRS的GGSN9进行试点面向对象

网络运营分析市场营销

共同点流量分析实现业务、网站、用户、区域、终端的流量分析√√端到端是专业的在线分析系统，非业务网元，因此其具备做复杂维度分析的条件，这在业务网元设备中无法实现；所以端到端在流量分析、用户行为分析、终端分析上具备更加多元的分析能力用户行为分析实现用户业务行为分析√√终端分析实现终端的业务、流量、质量分析√√区别网络质量分析实现PDP业务质量分析、以及IP重传、分片包分析√XVGS由于定位不同因此不具备相关业务维护优化分析能力。VGS由于只监控Gi接口，无法实现对小区级别的分析业务质量分析实现业务成功率、时延分析√X用户信令跟踪实现用户信令跟踪功能√X用户业务回放实现用户业务历史记录回放功能√X区域分析实现按区域的流量、质量分析√X资源容量预测实现网络资源容量的预测√X优化支撑实现信道占用估算，速率优化分析√X维护支撑实现投诉处理支撑及故障诊断√X专有APN分析实现专有APN的异常流量，IP利用率分析√X广告代投实现广告下发√√现有端到端系统具备该项功能的实现能力，预计需新增1-2台X86服务器，硬件投入在5W左右，软件投入在200W左右。广告信息插入实现广告信息的插入√√流量压缩清洗实现业务流量的压缩X√需要更改现有系统结构，短期内无法实现，实时计费实现GPRS业务的实时计费√√需要更改现有系统体系结构，短期内无法实现，建议结合PCC，由PCC实现此部分功能。APN融合实现CMWAP和CMNET的融合√√结论：由于VGS是基于WAPGW的改造相对于端到端系统，有其特有的一些功能属性，短期内端到端系统无法完全替代；如果端到端系统实现了与PCC的联动，则基本可代替VGS；建议在集团未明确时，谨慎上VGS系统目录CATALOGUE需求分析及建设方案2项目背景1项目投资预算3项目建设计划4项目投资预算序号项目投资（万元）备注一主设备费740

1应用软件流向专题分析26参照厂家报价估算终端专题分析72自定义小区主题分析48区域专题分析36维护支撑专题68专用APN分析45WLAN分流引导56并发用户数专题分析50业务优化支撑专题137接口服务52小计5902硬件设备350TB存储150二配套设备费5参照机房现有条件估算三建筑安装工程费5参照机房现有条件估算四其他费50约为主设备的7%合计800

2012年资本开支草案中“2012年数据网管本地改造预算1800万，其中端到端业务管理部分预算300万，数据网管自身部分600万元，路由分析部分200万元，IP地址管理及IP业务质量监测部分400万元，WLAN集中质量监测300万。项目投资计划实现情况说明2012年初，规划建设草案：年初规划草案本期建设实现情况1

、考虑将流量较大的重点地市（石家庄、保定、唐山）的Gb接口实现全采全监；由于集团已考虑规范Gb监测的相关建设指导意见，故本期暂缓建设，相关资源占用分析则通过GN口信令分析由集团统一的算法进行推导实现2、扩容系统存储空间，对历史数据备份，建立历史数据库。

本期已实现，按集团要求历史信令保留7天，用户CDR保留3个月，报表保存1年3、建议引入流量控制功能模块，初步实现基于业务、地理区域、用户优先级等维度的流控功能。由于集团已经明确，由PCC负责相关流量控制功能的实现，Gn端到端分析系统只负责业务分析，因此，将此部分内容的建设做了删除，加强了Gn分析功能的建设项目收益分析实现多网络协同有效增强流量经营的支撑能力营销目标可视市场形态可视用户行为可视战略地图的有效支撑流量经营支撑能力提升实现5张战略地图的全面支撑实现网络、终端、流量、应用、投诉的多维度联合分析实现三网协同分析能力实现业务并发用户监测，提升网路容量的可视性具备专线业务的分析保障能力构建满足河北本地运维需求的分析能力目录CATALOGUE需求分析及建设方案2项目背景1项目投资预算3项目建设计划4项目计划2012年6月：可研批复、提交采购申请2012年8月：项目技术商务谈判和合同签署2012年11月：工程实施及系统上线2012年12月：系统初验2013年3月：系统终验项目覆盖范围NODEB基站APWIFI3G2GBSCSGSNGGSNCMNETGNGB省级RadiusMSCRNCGIGI个人专线DSLAM接入Switch上网本MSCG中央Radius省级CMNET骨干CMNETCMWAP路由器Internet教育网EDU教育网EDU省内GN口信令采集AC1111部分采集部分采集部分采集端到端已完成本期河北移动流量经营试点方案引入VG