百度爬虫抓取频率突然暴增有什么负面影响吗?

10.31 21:06:11发布

1条回答

百度蜘蛛的抓取频次,可以在百度搜索资源平台的抓取频次工具查看。抓取频次暴增的话,有以下可能:

1、网站新增加了很多页面,有可能是自己发布的,也有可能是网站被黑产生的新页面。

2、网站之前抓取不到,搜索引擎蜘蛛需要加大抓取频次,以便把网站的内容全部重新抓取。

image.png