如何禁止搜索引擎收录抓取- 网站优化

当前位置: 首页 > 图文教程 > 网站运营 > 网站优化 > 如何禁止搜索引擎收录抓取

网站优化: SEO 网站反向链接的4个原则; SEO 网站内部重复内容的处理步骤; Google蜘蛛爬虫可以运行网页中的JS脚本和CSS样式; 代码语义化是最好的SEO; 网站被K的原因分析; Google排名网页加载速度和SEO的关系; SEO 探讨的百度link和谷歌PR; SEO是网站建设和发展策略的组成部分; 网站优化教程:网站首页优化的注意事项; 2010年SEO行业的挑战与困难; Google优化:HTML静态页面要比伪静态好; SEO指导知识:探讨的百度link和谷歌PR; Google排名:网页加载速度和SEO的关系; Google:推广自己的网站无需群发垃圾链接; SEO基础入门:搜索引擎的常用指令; Web Developer工具栏简化诊断SEO问题; 典型的过度优化的网站特征; SEO教程:如何选择关键词，如何维护关键词; 复制内容产生重复搜索引擎如何处理重复内容; 适当的用群发软件群发链接也可以提升PR值

技术文章搜索

关键字

出处:互联网 整理: 软晨网（RuanChen.com） 发布: 2009-10-17 浏览: 32 ::

收藏到网摘: n/a

如果你的网站涉及个人隐私或者机密性非公开的网页，怎样告诉禁止搜索引擎收录抓取，下面侯庆龙说下以下方法，希望对不想被搜索引擎收录抓取网站有所帮助。

第一种、robots.txt方法

搜索引擎默认的遵守robots.txt协议，创建robots.txt文本文件放至网站根目录下，编辑代码如下:

User-agent:*
Disallow:

通过代码，即可告诉搜索引擎不要抓取采取收录本网站。

第二种、网页代码

在网站首页代码<head>与</head>之间，加入<metaname="robots"content="noarchive">代码，此标记禁止搜索引擎抓取网站并显示网页快照。

如何禁止百度搜索引擎收录抓取网页

1、编辑robots.txt文件，设计标记为:

User-agent:Baiduspider
Disallow:/

2、在网站首页代码<head>与</head>之间，加入<metaname="Baiduspider"content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。

3、联系百度管理人员，信箱地址为:[email protected]，用网站联系人信箱发电邮，如实说明删除网页快照的情况，经百度核实后，网页停止收录抓取。

4、登陆百度自己的“百度快照”帖吧和“百度投诉”帖吧，发个帖子，表明删除网页收录网站快照的原因，当百度管理人员，看到会给予处理。

如何禁止Google搜索引擎收录抓取网页

1、编辑robots.txt文件，设计标记为:

User-agent:googlebot
Disallow:/

2、在网站首页代码<head>与</head>之间，加入<metaname="googlebot"content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。