繁體中文当前位置: 首页 > 图文教程 > 网站运营 > 网站优化 > SEO实例教程:robots.txt文件的作用
- 网站优化
- 优化最常见问题之今天你的站又被降权了吗
- 搜索引擎营销经验谈 对关键词的整体把握
- 提高权重一定要做有效有质量的反链
- 两个月时间做排名到百度前页 简单的三点
- 详细：网站被降权的原因分析以及解决办法
- 赶上谷歌过生日 新站一个月PR值从0到达5
- 友情链接首看友情 做链接应注重RP而非PR
- 全方位立体式 建设网站需要进行整站优化
- 提纲挈领：精心整理38条国内SEO经典语录
- 你的账房先生 使用谷歌Analytics分析网站
- 充分展示网站标题 百度最新分词算法说明
- SEO之关键词如何预测热门关键词
- 理解你的网站 DIV+CSS布局对优化的影响
- 网站搬家和重大变动 应该注意的几个问题
- 规范使用DIV+CSS命名规则 增强优化功效
- 伴随搜索引擎诞生 搜索营销优化走过14载
- 高流量并非是高效益 关于网站优化的误区
- 外文翻译：Google排名优化圣经
- 搜索引擎优化中的蝴蝶效应分析
- 误区释疑：搜索引擎优化并非一定是静态化
网站优化 中的 SEO实例教程:robots.txt文件的作用
出处:互联网 整理: 软晨网（RuanChen.com） 发布: 2010-01-03 浏览: 188 ::
收藏到网摘: n/a
引用一点百度百科：
robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。Robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。
当一个搜索蜘蛛访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围；如果该文件不存在，所有的搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。
robots.txt必须放置在一个站点的根目录下，而且文件名必须全部小写。
评论 (0) All
