Web服务器日志统计分析完全解决方案.doc

Web服务器日志统计分析完全解决方案.docWeb服务器日志统计分析完全解决方案hc360款聪网通信行业频道2003-06-0314:49:37摘耍:对于所有的ICP來说,除了保证网站稳定正常运行以外,一个重要的问题就是网站访问量的统计和分析报表,这对于了解和监控网站的运行状态,对提高各个网站的服务能力和服务水平是必不可少的。通过对Web服务器的日志文件进行分析和统计,能够有效掌握系统运行情况以及网站内容的受访问情况、加强对整个网站及其内容的维护与管理。本文对Web服务器日志分析的原理和技术进行讨论。文章相关软件:webalizeralizer/cronologche、 ±Web服务的发展,几乎各个政府部门、公司、大专院校、科研院所等都在构建或正在建设口己的网站。而与此同时,在构建网站建设中各个单位都会遇到各种各样的问题,那么对web服务器的运行和访问情况进行详细和周全的分析对于了解网站运行情况,发现网站存在的不足,促进网站的更好发展重要性是不言而喻的。管理Web网站不只是监视Web的速度和Web的内容传送,它要求不仅仅关注服务器每天的吞吐量,还要了解对这些Web网站的外来访问,了解网站各页面的访问情况,根据各页面的点击频率來改善网页的内容和质量、提高内容的对读性,跟踪包含有商业交易的步骤以及管理Web网站“幕后”的数据等。为了更好地提供器的运行情况、了解网站内容的详细访问状况就越来越显得重要和迫切了。而这些耍求都可以通过对web服务器的日志文件的统计和分析来做到。二、 WEB日志分析的原理网站服务器日志记录了web服务器接收处理请求以及运行时错误等各种原始信息。通过对日志进行统计、分析、综合,就能有效地掌握服务器的运行状况,发现和排除错误原因、了解客户访问分布等,更好的加强系统的维护和管理。在):客户端(浏览器)和web服务器建立tcp连接,连接建立以后,向web服务益发出访问请求(如:get),根据HTTP协议该请求中包含了客户端的IP地址、浏览器的类型、请求的URL等一系列信息。图1web访问机制web服务器收到请求后,将客户端要求的页面内容返回到客户端。如果出现错误,那么返回错误代码。服务器端将访问信息和错误信息纪录到tl志文件里。下面是客户端发送给web服务器请求的数据报的内容:GET/engineer/ideal/:image/gif,iniage/x-xbitmap,image/jpeg,image/pjpeg,application/-powerpoint,application/-excel,application/msword,*/*Referer:/engineer/ideal/Accept-Language:Accept-Encoding:gzip,detlateUser-Agent:Mozilla/;;)Host:onnection:Keep-Alive可以看到,在客户机的请求里包含了很多有用的信息,例如:客户端类型等等。^MSIIS等°而目前互联网上最常用的web服务器就是apache,因此我们这里的讨论都以Linux+apache环境讨论,其他的应用环境