请选择 进入手机版 | 继续访问电脑版
12
返回列表 发新帖
楼主: 荔枝_________

[网站优化] 更新了robots百度要多久后更新?

[复制链接]
发表于 2021-4-19 18:16:45 | 显示全部楼层
之前的动态该地址如果不想要收录,可以把这些链接整理出来,或者链接规律整理出来,在百度站长平台进行反馈,说明不想被收录,以及做好了robts等,会加速效果;
回复 支持 反对

使用道具 举报

发表于 2021-4-19 22:28:27 | 显示全部楼层
你说的和robots其实是两码事。
1、robots更新后不存在百度多久生效这个概念,你只要将这个txt文件更新,百度蜘蛛在每次抓取之前,都会读取这个文件,用来确定权限。
2、关于禁止动态链接,需要向百度后台提交死链,提交之前要将状态码改为404。
此外,robots只是建议参考,并没有强制性,并不代表百度一定不会抓取。完全不想被抓取,建议修改权限。
回复 支持 反对

使用道具 举报

发表于 2021-4-20 10:29:46 | 显示全部楼层
耐心等待一下就好了哟。
回复 支持 反对

使用道具 举报

发表于 2021-4-20 11:31:52 | 显示全部楼层
更新Robots协议后,需要在一周内生效,最好是删除后程序验证。
回复 支持 反对

使用道具 举报

发表于 2021-4-20 13:34:37 | 显示全部楼层
三天内生效吧
回复 支持 反对

使用道具 举报

发表于 2021-4-20 13:41:27 | 显示全部楼层
7到15天,有时候更快点,这个时间不是太准确,官方是7到15天
Robots工具目前支持48k的文件内容检测,请保证您的robots.txt文件不要过大,目录最长不超过250个字符。
回复 支持 反对

使用道具 举报

发表于 2021-4-20 13:47:36 | 显示全部楼层
路漫漫其修远兮
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2021-5-8 19:42 , Processed in 0.210127 second(s), 13 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部