关于Baidu spider抓取失败对流量的影响
【详细】
Baidu spider 流量 2011-09-30
百度spider对常用的http返回码的处理逻辑
百度爬虫在进行抓取和处理时,是根据http协议规范来设置相应的逻辑的,因此,如果网站/页面发生一些特别状况或者网站某类页面集存在特殊性的时候,我们必须知道如何处理才能更符合百度爬虫,以避免错误的...【详细】
百度 spider 2011-08-18