请选择 进入手机版 | 继续访问电脑版
查看: 17078|回复: 30

[站长互助] 通过站长工具robots检测,提示robots.txt无法访问

[复制链接]
发表于 2015-8-13 18:46:38 | 显示全部楼层 |阅读模式

如上图,通过地址栏直接输入是可以访问的,这是怎么回事?

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
发表于 2015-8-13 18:56:02 | 显示全部楼层
网址发上来我看看
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-8-13 18:59:01 | 显示全部楼层
ever非你不爱 发表于 2015-8-13 18:56
网址发上来我看看

www. sdhuida. com 不仅检测不到robots,而且抓取诊断也提示抓取失败,不知道什么原因?

点评

嗯,我看了一下,网站是正常的,robots也是正常的,但是站长平台检测的原因并不是检测不到,而是百度暂时无法访问您服务器上的robots.txt文件,请检查服务器的设置,确保该文件能被正常访问。错误码:403 网站服务  详情 回复 发表于 2015-8-13 19:04
回复 支持 反对

使用道具 举报

发表于 2015-8-13 19:04:49 | 显示全部楼层
澳德乐社区 发表于 2015-8-13 18:59
www. sdhuida. com 不仅检测不到robots,而且抓取诊断也提示抓取失败,不知道什么原因? ...

嗯,我看了一下,网站是正常的,robots也是正常的,但是站长平台检测的原因并不是检测不到,而是百度暂时无法访问您服务器上的robots.txt文件,请检查服务器的设置,确保该文件能被正常访问。错误码:403

网站服务器的问题,处理一下权限
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-8-13 19:09:12 | 显示全部楼层
ever非你不爱 发表于 2015-8-13 19:04
嗯,我看了一下,网站是正常的,robots也是正常的,但是站长平台检测的原因并不是检测不到,而是百度暂时 ...

我用的虚拟主机,后台无法修改权限,如果不能访问,对网站会有什么影响?

点评

虚拟主机也可以修改的,登录FTP就可以修改文件的属性,可以先改成777权限,再去检测一下,如果蜘蛛无法访问你的robots,就可以不遵守你设定的robots了  详情 回复 发表于 2015-8-13 19:11
回复 支持 反对

使用道具 举报

发表于 2015-8-13 19:11:18 | 显示全部楼层
澳德乐社区 发表于 2015-8-13 19:09
我用的虚拟主机,后台无法修改权限,如果不能访问,对网站会有什么影响? ...

虚拟主机也可以修改的,登录FTP就可以修改文件的属性,可以先改成777权限,再去检测一下,如果蜘蛛无法访问你的robots,就可以不遵守你设定的robots了
回复 支持 反对

使用道具 举报

发表于 2015-8-14 09:41:08 | 显示全部楼层
403 代表禁止访问
回复 支持 反对

使用道具 举报

发表于 2016-1-14 12:48:06 | 显示全部楼层
解决没有呢?
回复 支持 反对

使用道具 举报

发表于 2016-1-19 12:57:59 | 显示全部楼层
ever非你不爱 发表于 2015-8-13 19:04
嗯,我看了一下,网站是正常的,robots也是正常的,但是站长平台检测的原因并不是检测不到,而是百度暂时 ...

楼上你好,我的也是这种状况但是没有错误代码,我该怎么办呢, 我的是vps

点评

登录FTP就可以修改文件的属性,可以先改成777权限  详情 回复 发表于 2016-1-19 14:23
回复 支持 0 反对 1

使用道具 举报

发表于 2016-1-19 14:23:07 | 显示全部楼层
我家光环520 发表于 2016-1-19 12:57
楼上你好,我的也是这种状况但是没有错误代码,我该怎么办呢, 我的是vps ...

登录FTP就可以修改文件的属性,可以先改成777权限
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2020-10-20 08:56 , Processed in 0.343663 second(s), 17 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部