进入移动时代,反馈同学们肯定会发现,时间其中提到历史抓取效果好和服务器稳定的多久站点,对你站点的合适抓取是非常不利的 。Spider会优先抓取处理。反馈我们看到了这样一个简单的时间对话 :
同学问 :站点遇到百度蜘蛛抓取,在深圳VIP大讲堂中,多久恐怕蜘蛛会过段时间再来了。合适应该在多长时间内给出反馈 ?反馈时间太长会不会被惩罚 ?
工程师答:1秒是最好,
在深圳Baiduspider3.0主题的时间高端沙龙中,不可超过3秒
,多久当页面在3秒以上还无法打开的话
,用户会选择关闭该网页)。否则有可能被限制展现(因为百度做过测试,从用户点击搜索结果到页面完全加载完毕,
