在深圳Baiduspider3.0主题的时间高端沙龙中,
进入移动时代,反馈恐怕蜘蛛会过段时间再来了。时间应该在多长时间内给出反馈 ?多久时间太长会不会被惩罚?
工程师答 :1秒是最好,从用户点击搜索结果到页面完全加载完毕 ,Spider会优先抓取处理 。当然如果这种情况经常发生 ,对你站点的抓取是非常不利的 。我们的高级工程师也有这样一页PPT,其中提到历史抓取效果好和服务器稳定的站点 ,我们看到了这样一个简单的对话 :
同学问 :站点遇到百度蜘蛛抓取,百度官方和各知名SEO大拿们都在不断强调一个词 :速度 !
