请选择 进入手机版 | 继续访问电脑版
楼主: zijinjue888

网站不收录了,求解决

 关闭 [复制链接]
抢楼 抢楼 查看抢中楼层 本帖为抢楼帖,欢迎抢楼!  截止楼层:60  奖励楼层: * 
发表于 2017-6-27 14:25:44 | 显示全部楼层
具体得看情况
回复

使用道具 举报

发表于 2017-6-27 14:21:00 | 显示全部楼层
蜘蛛惯性抓取,可以吧404 重定向到sitemap或是首页
回复

使用道具 举报

 楼主| 发表于 2017-6-27 14:19:54 | 显示全部楼层
赛尔贝利亚 发表于 2017-6-27 14:17
你要不利用api目录建个导航页,把蜘蛛引过去试试

试过,但是蜘蛛很固执的抓那么几个.ashx的文件,引都引不走
回复

使用道具 举报

发表于 2017-6-27 14:17:57 | 显示全部楼层
你要不利用api目录建个导航页,把蜘蛛引过去试试

点评

试过,但是蜘蛛很固执的抓那么几个.ashx的文件,引都引不走  详情 回复 发表于 2017-6-27 14:19
回复

使用道具 举报

发表于 2017-6-27 14:09:17 | 显示全部楼层
慢慢过个把月就好了。
回复

使用道具 举报

发表于 2017-6-27 14:07:15 | 显示全部楼层
robots能屏蔽
回复

使用道具 举报

发表于 2017-6-27 14:02:07 | 显示全部楼层
等等就好了,时间是良药
回复

使用道具 举报

 楼主| 发表于 2017-6-27 13:58:37 | 显示全部楼层
liu516357119 发表于 2017-6-27 09:06
你这闭站两次都能有这么大的抓取量?
api无效目录就robots里屏蔽这个目录呗 ...

api抓取次数太多了,屏蔽掉的话,几乎没什么抓取了。这站以前13年的时候权重8的,日IP能到100W+,虽然关站了两次 但是蜘蛛还是挺多的
回复

使用道具 举报

发表于 2017-6-27 10:24:34 | 显示全部楼层
zijinjue888 发表于 2017-6-27 00:35
百度站长后台抓取频次大概1-2万每天,日志显示大概在10万左右

我是说,自己抓取诊断测试一下,多提交提交
回复

使用道具 举报

发表于 2017-6-27 10:20:37 | 显示全部楼层
建议屏蔽api目录,报社的网站,文章质量应该没问题,建议等一等,
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2019-10-23 12:46 , Processed in 0.748089 second(s), 10 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部