基于Web日志分析的校园网受众分析PPT课件.ppt

目录背景介绍Web日志分析原理系统设计与实现实验结果及分析小结背景介绍数字化校园已经成为高等院校信息化建设的一个重要目标网络宣传阵地的竞争日趋激烈新的问题校园网宣传是否达到了预期的效果?用户在接收和使用校园网信息的时候具有什么样的特点?校园网信息的传播存在什么样的规律?Web日志分析原理Web日志记录了网站服务器接收、处理请求以及运行错误等各种原始信息Web服务模式主要有三个步骤服务请求,包含用户端的众多基本信息,如IP地址、浏览器类型、目标URL等。服务响应,Web服务器接收到请求后,按照用户要求运行相应的功能,并将信息返回给用户。如果出现错误,将返回错误代码。追加日志,服务器将对用户访问过程中的相关信息以追加的方式保存到日志文件中。Web日志分析原理(续)域(Field)描述(Description)日期(Date)请求页面的时间、日期和时区(Date,timeandtime-zoneofrequest)客户端IP(ClienIP)远程主机的IP或DNS入口(RemotehostIPorDNSentry)用户名(Username)远程登陆的用户名(Remoteloginnameoftheuser)字节(Byte)发送和接收的字节(Bytestransferred,sentorreceived)服务器信息(Server)包括服务器名称、IP和端口(Servername,IPaddressandport)请求(Request)URL查询(URLquery)状态(Status)返回HTTP状态标识(HTTPstatuscodereturnedtotheclient)服务名(Servicename)用户请求的服务名称(Requestedservicename)时间开销(Timecost)完成浏览所用的时间(plete)协议及版本(Protocolandversion)传输用的协议及版本(Usedtransferprotocolanditsversion)用户代理(Useragent)服务提供者(Serviceprovider)Cookie标识号(CookieID)参考页(Reference)本页的上一页(Previouspage)Web日志分析原理(续)实验中采用的是NCSA公用格式,它是一种固定的ASCII格式,无法进行自定义。这种格式适用于网站,但不适用于FTP站点。NCSA日志实例:“-anonymous[25/Feb/2007:04:02:35+0800]"GET/?id=2331HTTP/"20011493”-Anonymous25/Feb/200704:02:35+0800请求/版本服务状态码发送的字节数ET/?id=233120011493系统设计与实现输入与定制网络日志文件用户的特定需求日志预处理去除无关信息综合分析从特定信息数据库和IP数据库中抽取相关的数据,根据用户的定制进行综合分析,得到关于特定信息受众的IP分布数据统计输出根据用户的需求绘制图表,并通过显示接口反馈给用户系统设计与实现(续)实验数据集清华新闻网(.)是清华大学的重要信息发布中心清华大学计算中心提供清华新闻网的访问日志,作为实验数据,测试我们的系统分析功能用户地理位置分析访问特征分析用户地理位置分析将网络受众的地理位置分析分为校内、国内、国外三个类型用户地理位置分析 ——校内受众分析案例一新闻《比尔·盖茨与清华学子精彩对话》发布后两个月内访问者在清华大学校内的分布