找回密码
 注册加入
搜索

百度spider不支持Crawl-delay设置的通知

2012-9-21 12:55| 发布者: 湖中沉| 查看: 641| 评论: 1|原作者: 湖中沉

站长之家(Chinaz.com)9月21日消息:百度站长平台昨日发布公告称,百度spider不再支持Crawl-delay的设置,如果想让配置网站针对百度spider的访问频率,可以使用百度站长平台的抓取压力反馈工具。

以下是公告内容全文:

尊敬的各位用户,亲爱的站长们,大家好:

近期,我们收到一些对Crawl-delay用法的询问,现明确百度对网站访问频率不再参考该设置,即不支持Crawl-delay配置,如果您希望配置网站针对百度spider的访问频率,建议您使用百度站长平台的抓取压力反馈工具,先查询网站在百度近一个月的天级抓取量趋势图,可调节百度spider每天访问您网站的抓取压力上限,供百度参考,避免百度spider对站点抓取压力过大,造成网站服务器负载及抓取异常。



路过

雷人

握手

鲜花

鸡蛋
发表评论

最新评论

引用 冰深 2012-9-22 08:46
额,我的新站刚上线,还没有用到这个...

查看全部评论(1)

Archiver|手机版|小黑屋|Discuz!扩展中心 - 杭州富迪文化艺术策划有限公司 版权所有 ( 浙ICP备14042422号-1 )|网站地图QQ机器人

GMT+8, 2025-10-16 17:58 , Processed in 0.015801 second(s), 13 queries , Gzip On, Redis On.

Powered by Discuz! X5.0

© 2001-2025 Discuz! Team.|IP地址位置数据由 纯真CZ88 提供支持

返回顶部