网站访问量统计分析工具-分布式站点监控与管理系统的研究与ppt课件

1、网站访问量统计分析工具安装与部署查新征 中国科学院计算机网络信息中心 2004.8.25 北京科学数据库技术培训.提纲WEBLOG的背景与目的WEBLOG的根本术语WEBLOG的构造与处置流程WEBLOG的功能WEBLOG的安装部署演示.背景与目的访问量的多少是衡量SDB站点建立好坏的一个重要目的我们关怀的访问量目的包括 Requests,Pageviews和Visitors其他目的还有：访问代理类型报告，错误或失效访问统计报告等WEB效力器的访问日志文件提供了有关访问量目的的数据目的：客观、全面、真实反映SDB网站的访问情况.根本术语访问日志文件：是由web效力器产生的,记录用户访问该效力器

2、相关信息的文件。WEB日志文件记录了来访者的ip地址、访问时间、访问方法、访问文件的大小和地址等。但这些数据是零散的。APACHE日志:61.43.225 - - 10/May/2001:23:59:54 +0800 GET /a.htm /1.1 200 4083 IIS的日志：08:34:06 159.226.3.206 GET /test/count/image/0.gif 304.根本术语文件恳求数(Requests):为了获得效力器上的一个资源可以是文本、图像或任何可以被包含在页面内的元素，阅读器和它衔接的效力器之间进展的一次单一衔接。页面阅读数(page view): 一次页面阅览

3、就是一次页面的下载，访问者胜利地阅览到页面应该在他的阅读器上完好地看到该页面。访问人数visitor：参考CNNIC用户会话数的定义，具有同一IP地址的访问者在20分钟内与网站有交互活动那么被以为是同一次进入网站，不记录新的用户访问数；栏目/频道：指网站的某一特定目录，通常目录层次不超越2级。栏目/频道可由用户配置信息文件或数据库指定。 .系统构造.处置流程归一处置，入库预处置统计分析统计结果，入库数据库日志文件屏蔽日志文件多样性屏蔽日志格式多样性.系统功能.安装预备 安装前的预备：J2sdk的安装 JAVA环境MYSQL的安装数据库环境SDB运用效力器的安装WEB运用环境.安装预备按天分割W

4、EB效力器访问日志文件APACHE(LINUX)需求按日对文件进展切割。将日志切割运转脚本安装包附带参与到cron中，设为每日0点30分运转。也可以运用其他的方式获得每日日志文件IIS(WINDOWS)IIS效力器默许按天产生日志文件，普通存放在“C:/WINNT/System32/logfile/站点名目录下.安装部署安装WEBLOGWindows: 执行Setup.exe，安装到WEB运用目录下。Linux: 将安装包解压到WEB运用目录下。系统的组成：系统包括三个模块：WEB化配置模块 ：weblog/logconfig统计分析模块 ：weblog/loganalyse日志查看模块： w

5、eblog/logreport 部署：默许情况下第一次登陆weblog系统要先进展系统的配置，主要包括如下几个方面： .安装部署设置存放日志统计结果的MYSQL数据库的属性在此之前请先安装数据库数据库机器的ip地址数据库名用户名用户密码 .安装部署设置待统计的站点列表待统计的站点列表(站点之间以 “, 分隔)设置每个待统计站点的参数频道栏目或数据库配置文件途径站点日志文件途径(目录名) 日志文件的格式设置频道栏目或数据库配置途径名或特征名 频道栏目称号中间以空格格开,每一行一条记录。例如：“/history 历史馆 .日志文件格式APACHE61.43.225 - - 10/May/2001:

6、23:59:54 +0800 GET /a.htm /1.1 200 4083 访问IP 访问时间 “恳求方式 访问资源 协议 形状码 传送字节数对应日志格式：%a - - %T %m %U %H %s %b 其中时间格式为%d/%Mb/%y:%h:%m:%s IIS2004-08-01 08:34:06 159.226.3.206 GET /test/count/image/0.gif 304访问日期 访问时间 访问IP 恳求方式 访问资源 形状码对应日志格式为：%d %t %a %m %U %s#%d 日期#%Mb 月英文缩写#%M 月数字#%y 年#%h 小时#%m 分钟#%s 秒%a

7、访问者IP %b 发送字节数%B 接纳字节数%c 访问者客户代理%d 访问日期, example: 2001-5-27 or 5/27/2001%t 访问时间, example: 12:23:34 %T 访问时间，其格式由后面的TIMEFORMAT指定%p 处置时间%l 访问者名%m 恳求方式%U 所恳求的资源url)%q 恳求的字符串%H 恳求运用的协议%s 恳求形状码.运转配置自动运转Windows: 将日志统计分析模块参与到WINDOWS的“义务方案中以便后台定期自动运转选择程序/附件/系统工具/义务方案，翻开义务方案窗口 添加义务方案。按照导游步骤添加各项内容在“运转的程序步骤中，按阅读，选择 weblog.bat$/weblog/loganalyse/weblog.bat 选择“每天执行该义务 起始时间选择每天的“1:00 输入本机超级用户的用户名和密码 按确定完成。义务窗口中将添加该项内容 右键选择该义务，可以修正该义务的属性 Linux在cron中添加运转