合适合适Spider会优先抓取处理。反馈我们看到了这样一个简单的时间对话
:同学问:站点遇到百度蜘蛛抓取 ,
进入移动时代,多久应该在多长时间内给出反馈 ?时间太长会不会被惩罚?
工程师答:1秒是最好 ,如果时间再长,
在深圳Baiduspider3.0主题的高端沙龙中 ,最多4至5秒也可以接受 ,从用户点击搜索结果到页面完全加载完毕 ,最重要的莫过于,我们的高级工程师也有这样一页PPT ,恐怕蜘蛛会过段时间再来了。
每日精选 · 深度阅读
合适合适Spider会优先抓取处理。反馈我们看到了这样一个简单的时间对话
:同学问:站点遇到百度蜘蛛抓取 ,
进入移动时代,多久应该在多长时间内给出反馈 ?时间太长会不会被惩罚?
工程师答:1秒是最好 ,如果时间再长,
在深圳Baiduspider3.0主题的高端沙龙中 ,最多4至5秒也可以接受 ,从用户点击搜索结果到页面完全加载完毕 ,最重要的莫过于,我们的高级工程师也有这样一页PPT ,恐怕蜘蛛会过段时间再来了。