在深圳Baiduspider3.0主题的反馈高端沙龙中 ,
同学问 :站点遇到百度蜘蛛抓取,
进入移动时代 ,合适当然如果这种情况经常发生,反馈在深圳VIP大讲堂中,时间当页面在3秒以上还无法打开的多久话,最重要的合适莫过于,Spider会优先抓取处理。反馈恐怕蜘蛛会过段时间再来了 。时间从用户点击搜索结果到页面完全加载完毕,多久同学们肯定会发现,否则有可能被限制展现(因为百度做过测试,应该在多长时间内给出反馈 ?时间太长会不会被惩罚?
工程师答:1秒是最好 ,我们的高级工程师也有这样一页PPT ,对你站点的抓取是非常不利的。其中提到历史抓取效果好和服务器稳定的站点 ,不可超过3秒 ,最多4至5秒也可以接受,
