码迷,mamicode.com
首页 > 其他好文 > 详细

如何禁止搜索引擎收录抓取

时间:2015-06-03 13:22:22      阅读:126      评论:0      收藏:0      [点我收藏+]

标签:

第一种、robots.txt方法

搜索引擎默认的遵守robots.txt协议,创建robots.txt文本文件放至网站根目录下,编辑代码如下:

User-agent:*
Disallow:

通过代码,即可告诉搜索引擎不要抓取采取收录本网站。

第二种、网页代码

在网站首页代码<head>与</head>之间,加入<metaname="robots"content="noarchive">代码,此标记禁止搜索引擎抓取网站并显示网页快照。

如何禁止百度搜索引擎收录抓取网页

1、编辑robots.txt文件,设计标记为:

User-agent:Baiduspider
Disallow:/

2、在网站首页代码<head>与</head>之间,加入<metaname="Baiduspider"content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。

3、联系百度管理人员,信箱地址为:webmaster@baidu.com,用网站联系人信箱发电邮,如实说明删除网页快照的情况,经百度核实后,网页停止收录抓取。

4、登陆百度自己的“百度快照”帖吧和“百度投诉”帖吧,发个帖子,表明删除网页收录网站快照的原因,当百度管理人员,看到会给予处理。

如何禁止Google搜索引擎收录抓取网页

1、编辑robots.txt文件,设计标记为:

User-agent:googlebot
Disallow:/

2、在网站首页代码<head>与</head>之间,加入<metaname="googlebot"content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。

本文摘自:SEO优化: 侯庆龙原载网址:www.noseo.org.cn

如何禁止搜索引擎收录抓取

标签:

原文地址:http://www.cnblogs.com/xiaomifeng/p/4548681.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!