百度蜘蛛抓取频率多少是合理的,决定因素是什么? 举报 理由 举报 取消 一般来讲,提到抓取,大家都是希望次数越多越好;但是站在搜索引擎的角度来讲,这很可能是一厢情愿,那么问题来了,假设一个产品列表页,那么蜘蛛的访问频率多少是合理的呢?影响因素有哪些? 2017年4月13日 1 条回复 971 次浏览 SEO,搜索引擎优化,蜘蛛
回复 ( 1 )
爬虫实际上是贪婪的,你如果爬虫放出新内容,爬虫胃口会越来越大,百万千万次和你的内容量有关