请选择 进入手机版 | 继续访问电脑版
查看: 3412|回复: 50

网站不收录了,求解决

 关闭 [复制链接]
抢楼 抢楼 查看抢中楼层 本帖为抢楼帖,欢迎抢楼!  截止楼层:60  奖励楼层: * 
发表于 2017-6-26 21:30:27 | 显示全部楼层 |阅读模式
50金币
本帖最后由 zijinjue888 于 2017-6-27 14:20 编辑

以前秒收,16年关站半年,重新开站收录就不太好了,后来又有点原因又关了2个月,就这个月刚开站。不过蜘蛛倒是挺多,一天两万左右的抓取频次,但是死活不收录,今天分析网站日志,居然百分之77的蜘蛛都在抓api这个目录!关键是我这个站从头到尾就没有过api这个目录,他怎么抓的?返回状态码也是404,但是蜘蛛一直很执着的抓这个目录,包括这个目录里各种自己编造的文件名。求解,我咋办,robots能不能屏蔽蜘蛛抓取这个目录,今天看了一下,这个目录抓取了6万多次,而首页index才抓取了300多次。。

发表于 2017-6-26 21:32:10 | 显示全部楼层
等等就好了,蜘蛛迷路了
回复

使用道具 举报

发表于 2017-6-26 21:43:40 | 显示全部楼层
时间是金钱 等
回复

使用道具 举报

发表于 2017-6-26 21:57:49 | 显示全部楼层
到蜘蛛池引蜘蛛,做SITEMAP,正确的引导蜘蛛爬行!

点评

各种蜘蛛池的去引,自动推送,主动提交+sitemap一起用的,外链也在一直做,友链换的也相当好,都是网易 大河网 和讯之类的大站首页友链。一个礼拜了到现在依然不起效果。而且文章也绝对没啥问题,报社的网站,全是一  详情 回复 发表于 2017-6-27 00:27
回复

使用道具 举报

发表于 2017-6-26 22:00:21 | 显示全部楼层
不管,不看,下月26号就好了,信不信由你
回复

使用道具 举报

发表于 2017-6-26 22:27:08 | 显示全部楼层
等等吧,老是关闭网站对百度信誉不好
回复

使用道具 举报

发表于 2017-6-26 22:37:30 | 显示全部楼层
rb要屏蔽那个目录,在等消息吧!
回复

使用道具 举报

发表于 2017-6-26 23:14:32 | 显示全部楼层
保持稳定,适当外链
回复

使用道具 举报

发表于 2017-6-26 23:52:30 | 显示全部楼层
继续更新下去
回复

使用道具 举报

发表于 2017-6-27 00:26:47 | 显示全部楼层
抓取诊断 查看ip是否正确 ip错误请点击报错 多诊断几次
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2019-9-22 05:25 , Processed in 0.322537 second(s), 10 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部