请选择 进入手机版 | 继续访问电脑版
查看: 724|回复: 2

[网站优化] Baiduspider每次抓取耗时特别高什么原因?

[复制链接]
发表于 2021-10-21 21:12:38 | 显示全部楼层 |阅读模式
Baiduspider每次抓取耗时特别高什么原因?用的是腾讯云网站打开速度很快很顺畅,但是每次抓取耗时怎么那么高? QQ图片20211021211151.png
发表于 2021-10-21 22:16:35 | 显示全部楼层
你的站点应该有问题,我的最大值才3000-5000之间,你的都3万了,3万应该是30秒。
有的时候可能是百度蜘蛛那面繁忙拥堵,但是也可能是你的服务器导致各类爬虫采集扫描导致了拥堵
回复 支持 反对

使用道具 举报

发表于 2021-10-21 22:50:39 | 显示全部楼层
微信截图_20211021224840.png

我wordpress程序的  抓取时间都没你那高。。。你的应该不正常

要么就是网络差,丢包严重
要么就是带宽不足导致的
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2021-12-6 20:58 , Processed in 0.336191 second(s), 18 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部