robots解除禁止抓取后的生效时间有多长？

Lee · 发表于 2012-6-27 10:14:03

常见问题：

案例：某网站

域名注册时间：2011

百度快照：不显示标题和描述

网站上线测试的时候用robots.txt禁止抓取过，之后将robots限制解除，打开一段时间之后robots.txt文件删除，删除之后几天又重新添加了robots.txt文件，经过6.2-22日日志观察，百度只访问robots.txt，代码为：
2011-06-16 06:27:11 W3SVC46543651 61.155.161.183GET /robots.txt - 80 - 119.63.196.120 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0

robots解除禁止抓取状态，需要一段时间生效的话，那这个周期又是多久呢，希望这个网站上的内容尽快恢复正常抓取、建立索引和显示！

官方回复：百度发现robots设置并更新抓取状态，正常情况在7天以内。

韭菜的粽子 · 发表于 2012-6-27 11:26:10

学习一下。很好。

这一刻心殇 · 发表于 2012-6-27 11:48:20

咦？原来这个不是在百度站长俱乐部？

sos5210 · 发表于 2012-6-27 15:45:42

这一刻心殇发表于 2012-6-27 11:48
咦？原来这个不是在百度站长俱乐部？

百度站长俱乐部是在百度贴吧里

120425796 · 发表于 2012-6-27 16:49:49

学习了:正常情况在7天以内。

这一刻心殇 · 发表于 2012-6-28 08:44:47

sos5210 发表于 2012-6-27 15:45
百度站长俱乐部是在百度贴吧里

嗯，我知道，所以我才说的……

wxl8868501 · 发表于 2012-6-28 15:37:03

不懂这个，等高手回答吧

szdayinji · 发表于 2012-6-29 08:55:44

呵呵七天啊还不知道呢

布汐 · 发表于 2012-6-29 10:20:29

好像比7天要长很多

华罡SEO学习网 · 发表于 2012-8-3 16:36:35

对通过我的长时间观察对于每一个站的情况应该是不一样的

而这个和百度对于您的网站信任度有直接的关系

[常见问题汇总] robots解除禁止抓取后的生效时间有多长？

评分

点评

点评