什么是Meta Robots 标签?

meta robots标签是一行可以在页面head元素中找到的代码,它告诉搜索引擎或其他爬虫该如何看待该页面的内容

常见的meta robots标签:

<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">

content 属性中有几种不同的值可以使用,当中最常用的为 indexnoindexfollownofollow,多个值可以以逗号分隔同时使用。

  • index:指示搜索引擎收录该页面的内容。这是默认值;所以一般不需要特别在标签内指定。
  • noindex:指示搜索引擎不要把这页面包含在索引内。
  • follow: 指示搜索引擎如常跟随该页面上的所有链接;默认值,一般不需使用。
  • nofollow: 指示搜索引擎不去跟随该页面上的任何链接

甚么是"被Meta Robots阻止"?

所有带在meta robots标签内noindex的页面将不会被搜索引擎收录,这意味着所有在此表格中列明的URL将不会在自然搜索结果内出现。

我应该怎样去利用这条资讯?

查看这些URL有没有包含你希望在自然搜索结果中出现的页面。如果你发现任何你无意出现在这个列表内的URL,你应该在这些页面内移除meta robots标签(或noindex值)。

你或许也应该看看你希望透过meta robots标签封锁的页面是否都已在这个列表中。有时候这些标签可能会有缺失或者错误的格式。(也有可能是Dragon Metrics并没有抓取这些页面。)

Did this answer your question?