·您现在的位置: 云翼网络 >> 文章中心 >> 网站建设 >> 网站建设问答 >> 如何近距离的了解蜘蛛爬行痕迹

如何近距离的了解蜘蛛爬行痕迹

作者:佚名      网站建设问答编辑:admin      更新时间:2022-07-23

大家好,由于时间关系好久没有写软文了,今天小杰为大家带来的是iis日志分析,和http状态的基本讲解,做为一个seo操作者,他必须是一个数据的分析师,为什么这样说了,因为通过这些数据的分析,我们可以很清楚的知道自己的网站到底那里出了问题,然后通过这些数据的分析,总结出方案来解决问题,那么今天小杰我就教大家如何去分析iis日志。

一、IIS日志的用途

IIS日志的用途,其实就是能够观察搜索引擎的蜘蛛来我们网站的爬取情况,可以更近距离的分析和接触蜘蛛。爬取次数,爬取时间点,爬取高峰期,爬取反应出来的HTTP状态码,为我们带来清晰的分析便利。

二、IIS日志的分析

 

大家通过上图我们可以读取到蜘蛛爬行。

1、123.125.71.113( 一个访问者的IP)

2、[28/Sep/2010:07:15:11 -0700](时间和端口)

3、GET /wangzhan-youhua/maowenben.html(访问了那个页面)

4、200 12864(HTTP状态码200,页面下载了12864字节)

5、“Baiduspider+(+http://www.baidu.com/search/spider.htm)”(百度蜘蛛)

HTTP基本状态码

200:请求已经完成,蜘蛛访问页面正常

301:已经移动,永久重定向

302:临时重定向

304:蜘蛛爬取后发现,页面没有修改

305:使用代理

400:请求错误

404:找不到页面

从而我们可以通过上面的分析得出一句完整的话,有一个IP来自123.125.71.113的访问者,是 baiduspider,在2010年9月28日7点15分11秒,通过0700端口,成功访问了wangzhan- youhua/maowenben.html这个页面,访问下载了12864个字节。

这是我在seo操作中的一些心得,与大家分享一下,杭州seo (www.gdwzjs.com)更多seo操作手法分享,转载请保留此链接!