如何通过 标签阻止网页被收录?

原创 长街seo博客  2018-10-09 19:48:16  阅读 298 次 评论 0 条

如何阻止网页被收录?对于这个问题,博主一般都会使用robots.txt文件来限制搜索引擎蜘蛛的抓取,但是这种方法比较麻烦,需要重新修改一下robots.txt文件,今天博主分享一个更加灵活的操作方法来限制搜索引擎蜘蛛的抓取,下面一起来看看:

如何通过 标签阻止网页被收录?

Meta标签在页面一般都是提供有关页面的元信息,比如说网站的作者、日期和时间、网页描述、关键词、页面刷新等,今天不说其他,就说如何通过<META> 标签禁止搜索引擎蜘蛛抓取页面,具体的代码非常简单,在你想要禁止抓取的页面<HEAD> 部分添加适当的 <META> 标签:

<meta name="robots" content="属性值" />

主要有以下四种形式来实现:

1.<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">,拦截所有搜索引擎蜘蛛抓取本页面;

2.<META NAME="baiduspider" CONTENT="NOINDEX, NOFOLLOW">,拦截百度蜘蛛爬取网页,不拦截其他搜索引擎的蜘蛛;

3.<META NAME="ROBOTS" CONTENT="NOFOLLOW">,允许搜索引擎抓取网页,但不允许追踪外部链接;

4.<META NAME="ROBOTS" CONTENT="NOIMAGEINDEX">,允许搜索引擎抓取收录网页,但禁止其收录网页上的图片。

<META> 标签阻止网页被收录只针对当前页面,所以我们只需要在需要禁止抓取的页面添加<META> 标签,其他页面不会受影响。也就是说,<META> 标签针对的是具体的某个网页,而不是整个网站。

关于如何通过 <META> 标签阻止网页被收录就给大家分享到这里了,更多seo优化知识请继续关注长街seo博客。


本文地址:http://www.changjieseo.com/20.html
版权声明:本文为原创文章,版权归 长街seo博客 所有,欢迎分享本文,转载请保留出处!

发表评论


表情

还没有留言,还不快点抢沙发?