Dragon Metrics 的站内审核工具会爬取你的网站以分析网站出现的 SEO 问题。在 SEO 的角度而言这些数据当然时愈早取得愈好,更早取得数据,我们用更快的爬取速度进行爬取。但当我们用更快的速度爬取你的网站,视乎网站伺服器的设置,我们爬虫被封锁的机会也会提高。因此我们让用户自行设定项目的爬取虫度,让你们可以用最快的时间得到数据而又不会被网站伺服器封锁。

以下是在不同的爬取速度下,一个有10,000条URL的若需的爬取时间:

速度 - 需时(小时)
缓慢 - 6
普通 - 2
快速 - 1
最快速 - 0.5

在创建项目时,你可以在快速设置向导 内指定爬取速度。在项目创建完成后,你也可以在以下两个地方修改爬取速度:

Did this answer your question?