请选择 进入手机版 | 继续访问电脑版
12
返回列表 发新帖
楼主: 飞鹰正义

[结果展现] robots屏蔽对阻止百度抓取死链是否有效

[复制链接]
发表于 2016-12-8 08:50:19 | 显示全部楼层
回复 支持 反对

使用道具 举报

发表于 2016-12-12 12:14:22 | 显示全部楼层
这里提交反应速度比较快点
回复 支持 反对

使用道具 举报

发表于 2018-3-14 17:45:15 | 显示全部楼层
没用,之前设置屏蔽抓取了,然后还会抓取一些死链。
回复 支持 反对

使用道具 举报

发表于 2018-3-14 18:02:36 | 显示全部楼层
robots屏蔽对阻止百度抓取死链是否有效
回复 支持 反对

使用道具 举报

发表于 2018-3-14 19:50:17 | 显示全部楼层
回复 支持 反对

使用道具 举报

发表于 2018-3-29 17:19:47 | 显示全部楼层
没用,有时候屏蔽抓取, 但还是被百度蜘蛛访问,个人感觉如果你要是有外链,还是会被抓取到。
回复 支持 反对

使用道具 举报

发表于 2018-4-10 11:22:55 | 显示全部楼层
原来是这样啊
回复 支持 反对

使用道具 举报

发表于 2018-5-17 08:37:34 | 显示全部楼层
来看一看
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2018-7-22 14:53 , Processed in 0.120050 second(s), 8 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部