扫一扫，极速登录
只需一步，快速开始
站长之家（Chinaz.com）9月21日消息：百度站长平台昨日发布公告称，百度spider不再支持Crawl-delay的设置，如果想让配置网站针对百度spider的访问频率，可以使用百度站长平台的抓取压力反馈工具。
以下是公告内容全文：
尊敬的各位用户，亲爱的站长们，大家好：
近期，我们收到一些对Crawl-delay用法的询问，现明确百度对网站访问频率不再参考该设置，即不支持Crawl-delay配置，如果您希望配置网站针对百度spider的访问频率，建议您使用百度站长平台的抓取压力反馈工具，先查询网站在百度近一个月的天级抓取量趋势图，可调节百度spider每天访问您网站的抓取压力上限，供百度参考，避免百度spider对站点抓取压力过大，造成网站服务器负载及抓取异常。
使用道具 举报
本版积分规则 发表回复 回帖并转播 回帖后跳转到最后一页
Archiver|手机版|小黑屋|Discuz!扩展中心 ( 浙ICP备14042422号-1 )|网站地图QQ机器人
GMT+8, 2024-4-29 10:15 , Processed in 0.164531 second(s), 13 queries , Gzip On, Redis On.
Powered by Discuz! X3.5
© 2001-2024 Discuz! Team.
雷达卡
发表于 2012-9-21 12:49:40
提升卡
抢沙发
千斤顶
发表于 2012-9-22 08:46:09