如何禁止搜索引擎抓取网站内容

如果你的网站涉及个人隐私或者机密性非公开的网页，如何禁止搜索引擎抓取网站内容，下面是一个简单的方法，希望想禁止搜索引擎抓取网站内容的站长有所帮助。

　　第一种、robots.txt方法禁止搜索引擎抓取网站内容

　　搜索引擎默认的遵守robots.txt协议，创建robots.txt文本文件放至网站根目录下可以禁止搜索引擎抓取网站内容，编辑代码如下:

User-agent: *

Disallow:

通过代码，即可禁止搜索引擎抓取网站内容。

第二种、网页代码禁止搜索引擎抓取网站内容

在网站首页代码与之间，加入 META content=NOARCHIVE name=ROBOTS代码，此标记禁止搜索引擎抓取网站并显示网页快照。

如何禁止百度搜索引擎抓取网站内容

1、编辑robots.txt文件，设计标记为:

User-agent: Baiduspider

Disallow: /

2、在网站首页代码与之间，加入 META content=NOARCHIVE name=BAIDUSPIDER即可禁止百度搜索引擎抓取网站并显示网页快照。

3、联系百度管理人员，信箱地址为:webmaster@baidu.com，用网站联系人信箱发电邮，如实说明删除网页快照的情况，经百度核实后，网页停止收录抓取。

4、登陆百度自己的“百度快照”帖吧和“百度投诉”帖吧，发个帖子，表明删除网页收录网站快照的原因，当百度管理人员，看到会给予处理。

如何禁止Google搜索引擎收录抓取网站内容

1、编辑robots.txt文件，设计标记为:

User-agent: googlebot

Disallow: /

2、在网站首页代码与之间，加入META NAME="GOOGLEBOT" CONTENT="NOARCHIVE"即可禁止google搜索引擎抓取网站并显示网页快照。