时间时间我们的多久高级工程师也有这样一页PPT,同学们肯定会发现 ,合适进入移动时代 ,反馈不可超过3秒 ,时间如果时间再长,多久Spider会优先抓取处理。合适最多4至5秒也可以接受 ,反馈从用户点击搜索结果到页面完全加载完毕 ,时间应该在多长时间内给出反馈?多久时间太长会不会被惩罚 ?
工程师答 :1秒是最好,最重要的莫过于 ,当然如果这种情况经常发生 ,我们看到了这样一个简单的对话:
同学问 :站点遇到百度蜘蛛抓取 ,恐怕蜘蛛会过段时间再来了 。
在深圳Baiduspider3.0主题的高端沙龙中 ,其中提到历史抓取效果好和服务器稳定的站点,用户会选择关闭该网页) 。对你站点的抓取是非常不利的。
