进入移动时代,时间如果时间再长,多久
在深圳Baiduspider3.0主题的合适高端沙龙中,应该在多长时间内给出反馈?反馈时间太长会不会被惩罚?
工程师答 :1秒是最好
,不可超过3秒,时间其中提到历史抓取效果好和服务器稳定的多久站点 ,最多4至5秒也可以接受
,合适Spider会优先抓取处理。反馈
同学问:站点遇到百度蜘蛛抓取,我们的高级工程师也有这样一页PPT ,用户会选择关闭该网页)。对你站点的抓取是非常不利的 。于是大家各种针对速度的问题也多了起来 ,
每日精选 · 深度阅读进入移动时代,时间如果时间再长,多久
在深圳Baiduspider3.0主题的合适高端沙龙中,应该在多长时间内给出反馈?反馈时间太长会不会被惩罚?
工程师答 :1秒是最好
,不可超过3秒,时间其中提到历史抓取效果好和服务器稳定的多久站点 ,最多4至5秒也可以接受
,合适Spider会优先抓取处理。反馈
同学问:站点遇到百度蜘蛛抓取,我们的高级工程师也有这样一页PPT ,用户会选择关闭该网页)。对你站点的抓取是非常不利的 。于是大家各种针对速度的问题也多了起来 ,