论掌上潍坊WAP门户GPRS流量统计解决方案样本

掌上潍坊WAP门户GPRS流量统计处理方案广州全速通信技术服务二零零七年十一月1、引言1.1 编写目标为愈加好推进“掌上潍坊WAP门户”（以下简称“掌上潍坊”）项目顺利进行，确保掌上潍坊开发质量，和GPRS流量统计分析功效技术支撑力度，为后期门户设计开发及运行推广奠定良好基础，依据潍坊移动及全速企业掌上潍坊项目组初步意向，针对掌上潍坊GPRS流量统计，特编写本技术处理方案。本方案对掌上潍坊GPRS流量做全方面细致用户需求分析，明确所要开发系统应有功效、性能和界面，使系统分析人员及软件开发人员能清楚地了解用户需求，并在此基础上深入进行掌上潍坊整体设计需求分析、可行性分析和后续设计/开发/测试工作。本文档预期读者为潍坊移动、全速企业掌上湛江项目组各组员、程序开发人员、测试人员、项目管理人员等。1.2 背景伴随通信技术发展，无线互联网成为电子媒体、电子政务关键发展方向，而怎样经过对WAP网站各项指标进行分析，得到目前WAP网站运行情况，有效地进行调整、优化和策略营销，显得尤为关键。掌上潍坊GPRS流量统计系统建设目标在于：提供监测及统计手机用户访问掌上潍坊产生GPRS流量，为运行人员提供优良数据支撑，方便运行人员了解用户需求，也为门户多元化营销提供便利。在此背景下，全速企业就掌上潍坊GPRS统计系统各方面进行了良好沟通及磋商，初步达成多方面一致意见。全速企业技术研发中心进行严谨及周全需求分析及技术研讨，明确本项目开发背景以下：项目系统名称：掌上潍坊GPRS流量统计系统项目任务提出者：中国移动通信集团山东潍坊分企业技术实施组织者：广州全速通信技术服务掌上潍坊项目团体项目系统开发者：广州全速通信技术服务技术研发中心项目针对用户：潍坊市移动、全速企业市场部1.3 参考资料2、任务概述2.1目标掌上潍坊GPRS流量统计系统在应用方面，将含有立即性、正确性、权威性、可靠性、安全性。在建设中，将重视网络平台、应用体系、数据库体系和安全体系计划和建设： 应用方面，系统将含有高效数据采集、分析、整理、存放功效，并给门户整体架构相关功效提供必需接口及通道；在数据库体系中，含有稳定高效数据备份和恢复功效；安全方面，提议标准统一、分等级授权管理、适用应用需要、切实可行网络安全保障体系及系统功效管理体系。2.2 运行环境掌上潍坊GPRS流量统计系统在软硬件方面，采取多层逻辑结构，各层各司其职。包含：数据采集层：负责监控WAP应用服务器网络端口，并对网络数据进行采集，递交给数据分析层进行处理。数据分析层：对采集得到数据进行分析、筛选，提取有效数据，并统计出所使用GPRS流量，递交于数据存放层进行存放。数据存放层：负责存放数据、缓冲数据存放等。 在服务器方面依据功效细分为4个部分：数据采集分析服务器负责运行数据采集层、数据分析层模块。数据库服务器负责存放数据（可集成在掌上潍坊门户数据库中）。支撑平台服务器负责提供管理平台，如统计分析功效页面等。（可集成于掌上潍坊WAP服务器上）可多台服务器共同完成某一功效，也能够一台服务器负责多个功效，依据具体需求进行配置。2.3 硬件要求掌上潍坊GPRS流量统计系统所适用服务器可和掌上潍坊门户服务器结合使用，故对硬件配置要求，可参考以下硬件标准（列表不包含掌上潍坊和GPRS流量统计无关其它功效服务器）。参考标准（理论值）：二十四小时内最大可处理43,200,000个用户请求（30,000tpmC）。（视实际网络环境）编号用途型号数量厂商参数备注1数据采集分析服务器/WAP服务器/支撑平台服务器PowerEdge29501戴尔(DELL)·RAID5磁盘冗余·1X146GBSAS硬盘·1X至强双核51101.6GCPU4MBCache·4GBECC内存·700W冗余电源·2U机架式结构运行数据采集层、数据分析层模块。和WAP服务器、支撑平台服务器共享使用2数据库服务器PowerEdge29501戴尔(DELL)·3X146GBSAS硬盘·1X至强双核51101.6GCPU2MBCache·2GBECC内存·700W冗余电源·2U机架式结构存放GPRS流量统计数据。和掌上潍坊门户数据库共享使用。2.4 软件要求列表不包含掌上潍坊和GPRS流量统计无关软件。编号用途型号/版本/语言数量厂商参数备注1服务器操作系统MICROSOFTWINDOWSSERVER1MICROSOFTN/AN/A2数据库管理系统MICROSOFTSQLSERVER1MICROSOFTN/AN/A4掌上潍坊GPRS流量统计系统Ver2.01全速通信N/AN/A3、功效划分 掌上潍坊依据功效表现分为GPRS流量统计模块、GPRS数据挖掘管理后台两大板块。以下将分别进行划分：3.1 GPRS流量统计模块GPRS流量统计模块关键负责监听WAP服务网络端口，捕捉该端口数据包，并进行数据采集、分析，并进行筛选归纳以后，存放到数据存放空间（数据库）。3.2 GPRS数据挖掘管理后台GPRS数据挖掘管理后台，是掌上潍坊管理后台其中一个关键部分，关键负责经过页面列表、图表方法将各访问用户、访问请求数据展示给运行人员，同时可经过数据统计分析方法得到更深层面数据，如用户访问次数、回头率等。（此板块在掌上潍坊需求分析书将加以具体介绍）4、网络架构 5、数据描述5.1 数据库描述 掌上潍坊将采取MicrosoftSQLServer/数据库5.2 数据字典（1）数据包信息表字段名称字段描述类型长度ID自增IDINT4IP请求或响应IPVARCHAR30MobileNo手机号码VARCHAR21PacketSize数据包大小INT4DataType数据包类型（TCP/UDP/ICMP/OTHER）VARCHAR10TranferType传输类型：接收/发送VARCHAR10RecvTime接收时间DATETIME8IsAvail是否有效数据：1是0否NUMERIC1统计用户手机号码及数据有效性，以较为正确地统计各地域访问产生流量。（2）用户日流量表字段名称字段描述类型长度ID自增IDINT4IP请求或响应IPVARCHAR30MobileNo手机号码VARCHAR21UpDataSize上传流量（请求）INT4DownDataSize下载流量（响应）INT4TotalDataSize总流量INT4由用户日流量，可衍生出周流量、月流量、季度流量和年度流量。6、性能需求6.1 数据正确度 （1）严格采集网络数据，并对非手机用户访问、非移动手机用户访问、非统计区域移动手机访问产生数据进行严格筛选，确保数据统计正确性。 （2）数据查询统计时确保查全率，系统提供两种方法进行查询：直接查询和模糊查询，方面深入数据统计。6.2 时间特征对每个请求数据采集、分析、存放，使用时间应在1秒；数据统计后台在数据查询时通常操作响应时间在1-2秒内，复杂逻辑处理及统计查询也应在可接收时间内完成。6.3 稳定性系统将可确保7×二十四小时不间断运行，且不对网络造成阶段性或长久性影响。7、运行需求GPRS流量统计系统运行于MICROSOFTWINDOWSNT以上操作系统，并以MICROSOFT