请选择 进入手机版 | 继续访问电脑版
查看: 1977|回复: 5

[建库收录] 为何百度抓取链接都会带上/$loadimg_url

[复制链接]
发表于 2021-10-13 22:42:38 | 显示全部楼层 |阅读模式
50金币
以前没有装宝塔的专业版不知道现在装了宝塔的专业版后可以看到百度蜘蛛爬行链接很多带/$loadimg_url
凡是带/$loadimg_url 的都显示抓取404
这是怎么一回事
他是先访问一个正常的链接返回状态 200
然后再来一个同样的链接,但是后面加上/$loadimg_url  显示404
怎么办支支招


174208qj0404g9l0p74ppx.png


170056m69ihjz03jx6yx9x.png

发表于 2021-10-14 10:10:19 | 显示全部楼层
亲,百度的东西,你不要深思去研究,额外是蜘蛛,建议您把这个文件用robots写入禁止爬行!
回复

使用道具 举报

发表于 2021-10-14 10:18:32 | 显示全部楼层
汗珠掉一地,屏蔽吧!
回复

使用道具 举报

发表于 2021-10-14 17:33:58 | 显示全部楼层
robos禁止爬取,页面可能存在$loadimg_url 图片加载代码 有问题吧,或者php生成变量生成出来了,检查一下自己站点,出现这么多
回复

使用道具 举报

发表于 2021-10-16 19:40:34 | 显示全部楼层
也许是程序的问题,检查一下。
回复

使用道具 举报

发表于 2021-10-23 22:54:30 | 显示全部楼层
来  学习一下 ;
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2021-11-30 15:23 , Processed in 0.278964 second(s), 17 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部