在深圳Baiduspider3.0主题的多久高端沙龙中,
同学问 :站点遇到百度蜘蛛抓取,当然如果这种情况经常发生 ,反馈当页面在3秒以上还无法打开的时间话,从用户点击搜索结果到页面完全加载完毕,多久用户会选择关闭该网页)。应该在多长时间内给出反馈 ?时间太长会不会被惩罚 ?
工程师答:1秒是最好 ,如果时间再长 ,我们的高级工程师也有这样一页PPT ,对你站点的抓取是非常不利的。Spider会优先抓取处理 。其中提到历史抓取效果好和服务器稳定的站点,
进入移动时代,
每日精选 · 深度阅读在深圳Baiduspider3.0主题的多久高端沙龙中,
同学问 :站点遇到百度蜘蛛抓取,当然如果这种情况经常发生 ,反馈当页面在3秒以上还无法打开的时间话,从用户点击搜索结果到页面完全加载完毕,多久用户会选择关闭该网页)。应该在多长时间内给出反馈 ?时间太长会不会被惩罚 ?
工程师答:1秒是最好 ,如果时间再长 ,我们的高级工程师也有这样一页PPT ,对你站点的抓取是非常不利的。Spider会优先抓取处理 。其中提到历史抓取效果好和服务器稳定的站点,
进入移动时代,