1:蜘蛛本身就是模拟用户行为进行爬行读取,网站打开速度慢,影响实际用户体验的同时,肯定也同时会影响到模拟用户体验的蜘蛛。当一个网站打开速度慢的时候,蜘蛛会对这个网站的评分降低,进而影响到读取、收录等一系列行为。
2:蜘蛛抓取页面数量=停留总时间/单个页面停留时间先不管打开速度慢蜘蛛会不会提前撤退的问题,假若蜘蛛在网站的总停留时间固定,如果页面打开时间变慢,则总停留时间除以单个页面的停留时间即蜘蛛抓取的页面数量就会变少,抓取的量变少,相应的被收录的量肯定也会变少。
3:网站打开时间变慢之后,蜘蛛会对这个网站有抵触意识,慢慢的就会来的次数变少甚至不再来爬取。当一个网站没有蜘蛛爬取的时候,收录量变少也是理所当然的事情了。