如何禁止网页被搜索引擎收录和索引?

张子凡 SEO问答 2017-09-18 16:16:03 阅读(481) 评论(0)

robots.txt文件是作为禁止搜索引擎抓取的最常用的手段和方法,但是该方法并不能完全阻止搜索引擎的收录的索引,那么我们此时就可以使用网页meta标签来实现完全的禁止搜索引擎收录索引。

meta robots

直接上代码:

1.拦截所有搜索引擎收录和索引网页

1
<meta name="robots" content="noindex,nofollow">

2.只拦截百度蜘蛛,而允许其他搜索引擎索引收录

1
<meta name="baiduspider" content="noindex,nofollow">

3.允许搜索引擎收录索引网页,但禁止继续追踪页面链接

1
<meta name="robots" content="nofollow">

4.允许搜索引擎收录索引网页,但禁止收录网页上的图片:

1
<meta name="robots" content="noimageindex">

大家可以根据自己的实际需求将以上代码放置在自己某个具体网页的head头部中,例如很多网站的后台登录页面等等,同样如果你的某些网页被搜索引擎已经收录索引了,添加禁止标签后当搜索引擎再次抓取更新的时候是会被移除的。

但是需要注意的是,该禁止标签注意使用,千万不可放这个标签用于使用模板或主题的head中了,不然你的整个网站都将可以被影响,操作错误可能就直接影响了整个网站的收录。

前面的文章中子凡已经在泪雪博客介绍过收录与索引的区别,如果还有朋友不了解,可以前去看看《什么是搜索引擎索引和收录?有什么区别?》。

除非注明,否则均为泪雪博客原创文章,转载请以链接形式标明本文地址

本文链接:https://zhangzifan.com/t/6818.html

发表评论