访问日志寻找百度蜘蛛的足迹- 网站优化

当前位置: 首页 > 图文教程 > 网站运营 > 网站优化 > 访问日志寻找百度蜘蛛的足迹

网站优化: 如何提高网站的谷歌页面等级权重; PR更新了但是能够代表什么呢; 网站主要状态页细解以及与搜索引擎的关系; 网站的规范标准化建设以及robots协议详解; 二十八个让关键词排名明显改观的优化技巧; 耐心与细致搜索引擎优化的六个基础步骤; link和domain在不同的搜索引擎含义不相同; 网页内容针对用户和搜索引擎的不同要求; 基础教程：关键词选择基本思路和分析过程; 方方面面：五十七条搜索引擎优化实用技巧; 经验：让百度三天就收录网站的九个小诀窍; 用六个办法加快百度搜索引擎对新站的收录; 网站快速被百度和谷歌收录的六个建站气质; 搜索优化外链为王时代不要忘记内链建设; 百度更改网页权重算法网站如何被顺利收录; 站长不要讨一时之巧在网页优化中进行作弊; 搜索引擎不及时更新或被降权被封怎么处理; 谷歌中文官方博客简单介绍什么是导入链接; 草根站长所关心的百度收录新站的几点看法; 耕耘自己一亩三分田个人站长勿入SEO误区

技术文章搜索

关键字

出处:互联网 整理: 软晨网（RuanChen.com） 发布: 2009-10-17 浏览: 91 ::

收藏到网摘: n/a

像很多开始学SEO的新手一样，SEO地爱歪也对这个问题有过迷惑，认为百度、Google等的蜘蛛都是晚上爬行这也是很多SEO高手或大师们的说法。所以造成了大多数SEO们的认识。

可是就在前几天，SEO地爱歪也想真正寻求这个问题的答案。而方法就是分析WEB服务器的访问日志。今天我就下载网站的日志，并带领大家一起寻找百度SPIDER的踪迹。我用的万网的UNIX服务器，可能有的朋友跟我的不同，不过大同小异。

1、我们FTP到网站目录

2、打开wwwlogs目录，如果根目录下没用该目录，请询问服务商的技术支持，反正这一步找到日志文件的存放路径

3、查看日志文件，一般来讲，访问日志会按照日期进行存储，比如SEO地爱歪的就是access.log.2.gz

4、我们拖放该文件到本地

5、解压，然后用写字板打开，一般用记事本打开会显示得很乱

6、查询baiduspider

7、在结果中查看百度蜘蛛的爬行痕迹，如图所示：

8/我们继续寻找百度蜘蛛的踪迹，下面是百度蜘蛛晚上3点

61.135.168.39 - - ［23/Jun/2008：03：06：59 +0800］ “GET / HTTP/1.1” 200 6248 “-” “Baiduspider+（+

9、下图是我们本文的重点，

61.135.168.35 - - ［23/Jun/2008：10：39：52 +0800］ ”GET / HTTP/1.1“ 200 6248 ”-“ ”Baiduspider+（+

我们可以很明白的看到百度蜘蛛上午10点仍然在爬行我的站点。

10、我们继续寻找，可以看到11点12点13点、14点的爬行踪迹。

总之，百度蜘蛛爬行不一定只有晚上，可能白天也很多，换点石的一位会员的说法是：

蜘蛛一般很早就来吃早餐如果你的网站很美味，中午和下午都会再回来。原文：www.zph5.com