请选择 进入手机版 | 继续访问电脑版
查看: 313|回复: 14

[站长互助] 请教百度蜘蛛的分析

[复制链接]
发表于 2019-7-20 11:28:35 | 显示全部楼层 |阅读模式
本帖最后由 遇见一朵落花儿 于 2019-7-20 11:31 编辑

我这个网站最近的百度蜘蛛出现了问题,但我不太明白这是什么问题,有知道解决方法的吗,求指教


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
发表于 2019-7-20 11:42:24 | 显示全部楼层
robots文件设置一下,js/图片类的设置成不被抓取
回复 支持 反对

使用道具 举报

发表于 2019-7-20 14:28:09 | 显示全部楼层
回复 支持 反对

使用道具 举报

发表于 2019-7-24 12:31:16 | 显示全部楼层
回复 支持 反对

使用道具 举报

发表于 2019-7-24 15:48:14 | 显示全部楼层
对不想被抓取的东西robots.txt文章里面屏蔽一下就好
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-7-25 11:20:17 | 显示全部楼层
love花的泪痕 发表于 2019-7-24 15:48
对不想被抓取的东西robots.txt文章里面屏蔽一下就好

屏蔽了都没有用  还是抓取
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-7-25 11:22:00 | 显示全部楼层
風欲殺 发表于 2019-7-20 11:42
robots文件设置一下,js/图片类的设置成不被抓取

主要不知道这些是什么 ,也不是图片
回复 支持 反对

使用道具 举报

发表于 2019-7-25 11:24:09 | 显示全部楼层
不想被抓取的屏蔽一下就好
回复 支持 反对

使用道具 举报

发表于 2019-7-25 13:40:51 | 显示全部楼层
回复 支持 反对

使用道具 举报

发表于 2019-7-25 14:31:58 | 显示全部楼层
遇见一朵落花儿 发表于 2019-7-25 11:20
屏蔽了都没有用  还是抓取

设置了还是抓取这种情况还真没有遇到过
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2019-8-23 21:13 , Processed in 0.430774 second(s), 7 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部