网站日志也称为服务器日志,是记录Web服务器接收处理请求以及运行时的各种状态信息,并以.log结尾的文件,网站日志存储于服务器的某个文件夹中,如主机的logfiles 文件夹,查看分析时将它要下载到本地。
然后利用网站日志分析工具进行分析,主要分析的内容包括搜索引擎蜘蛛的爬行次数、服务器的响应代码、访问的页面、IP段这4项内容。蜘蛛爬行次数,反映了网站的更新频率和网站的权重,次数降低可能是作弊被惩罚,或者网站更新太慢。
服务器的响应代码,表示服务器对用户访问返回的状态,其中200表示成功返回, 304、404表示返回错误。访问的页面表示搜索引擎蜘蛛爬行的页面,可以分析网站哪些页面被爬行。
搜索引擎蜘蛛IP段,表示搜索引擎蜘蛛爬行该网页使用的服务器,有的IP段服务器是搜索引擎专门寻找作弊网站的,如百度IP段: 123.125.68.、220.181.68%,如果网站出现很多这些IP段蜘蛛,那么有可能受到百度的惩罚。如图3.25所示为利用IS网站日志分析工具分析某网站的日志记录。
