已爬取页面数据显示了 Dragon Metrics 爬虫在某次爬取时能够爬取页面的总数,你可以在网站分析或网页解析页的右上方或网站分析概况页的已爬取页面图表:

这项数据有什么作用?

  • 这个指标的第一个用途是查看 Dragonbot 能否按你设定的 爬取指引限制 进行爬取
  • 它用可以用作网站对搜索引擎的爬取友好度的参考-如果你确认 Dragonbot 对网站的爬取没有任何问题,但这里显示的数据也是远低于预期,搜索引擎对网站的爬取和收录也有可能会出现问题,这个情况下你可以查看我们的网站分析有没有汇报任何爬取问题
Did this answer your question?