请选择 进入手机版 | 继续访问电脑版
查看: 438|回复: 0

[网站优化] 关于小程序路径变化的旧数据处理及后台反馈数据处理流程

[复制链接]
发表于 2021-4-9 17:42:10 | 显示全部楼层 |阅读模式
关于小程序路径变化的旧数据处理及后台反馈的“未收录资源”数据处理流程

本篇内容来自用户@蜜匠婚礼 的投稿,主要分享了“小程序路径变化后的旧数据处理”以及“未收录资源的数据处理”,如果大家有其他小程序数据处理相关的经验想要分享,欢迎在下方留言或者将分享稿砸向我们~
------------------------以下为正文---------------------
一、关于小程序路径变化的旧数据处理

A.为什么小程序会出现路径变化的场景?

经常引发小程序路径变化的原因有以下几种:
1.  小程序改版(类似网站改版,会适当改变网站URL结构)
2.  分包处理(早期开发未做分包处理,后来做了分包处理,必定会导致部分路径变化)
3.  数据路径未做唯一化处理(这种情况一般发生在蜘蛛抓取中,小程序后台给的反馈数据中;例如,数据ID为10000,前端正常路径为/pages/detail/main?id=10000;但是路径/pages/detail/main?id=10000和/pages/detail/main?Id=10000,页面数据完全一样,均能在完成的小程序链接中打开,这就说明这类数据的路径未做唯一化,如果这类数据过多可能导致的结果就是蜘蛛抓取会认为数据重复多,导致整个质量下降,所以需要做路径的唯一化处理的同时,也要把之前蜘蛛抓取的非正常路径的旧数据做处理)
B.小程序路径变化的旧数据处理流程:
1.  在分包处理完后,或者数据路径做唯一化处理完后,以及小程序改版完后,要把前后路径有变动的旧数据全部提交404;具体在小程序后台----搜索接入----自然搜索----资源删除----提交文件(把需要处理的数据在本地整理好以txt文本形式保存上传);如图所示:



提示:这里每日最多只能提交一次404文件,每日最多也只能提交1000条数据,如果需要处理的数据过多,所以最好一次性整理完,然后每日提交,同时做robots的限制;

2.   robots的限制:在需要处理的数据过多的情况下,可以结合robots协议设置来处理,在robots协议中设置不允许蜘蛛抓取改版之前的错误路径;小程序robots协议设置开关在:小程序后台面板----小程序管理----设置----开发设置----小程序资源抓取设置----点击设置----点击上传协议,具体如图所示:




具体robots协议内容怎么写,官方详细介绍在此:

3.  将最新的正确路径的数据,全部重新提交小程序,可以在小程序的小时级、天级、周级入口提交;
以上3个步骤处理完其实不算完,还有接下来的持续操作,就是在小程序后台,每日都会反馈回来一部分“未收录的资源”;这些未收录的资源数据反馈中,其中就有部分蜘蛛抓取的旧路径的错误数据,所以也需要处理,这里就直接讲述后台反馈回来的“未收录资源”处理流程;

二、未收录资源”数据处理流程

1.  未收录资源一般都会显示出未收录的原因,常见的有“资源内容地址”(包含了:内容低质、空短页、报错页等)、“抓取失败”(包含了网络错误、连接站点失败、连接超时等)、资源死链(包含了协议死链、内容死链等);如图:





2.  选中每一项显示的旧数据,点击下载详情报告:如下图



注意:这里有个技巧,因为每项数据反馈下载下来的详情报告,是抽样出来的,所以最多每次每项数据详情下载下来的只有1000条,所以,当显示的数据超过1000条时,最好不要选择上述图中的全部,而是选中每个详细的未收录原因(例如:内容低质),再点击下载详情报告;另外、根据经验,有些反馈显示的数量和下载下来的数据数量并不同,例如内容低质显示的3073,但是实际下载详情报告里,可能只有3条数据,造成的原因,是百度自身,所以这点我觉得百度还是需要优化下,这种情况,为了一次处理更多的处理数据,所以我建议选择“全部”,也下载一次;

这里总结下:就是把每个选项,都选中,下载详情下来,最后汇总到一个表格里;如下图:


3.  根据上述提示的不同原因未收录的数据,做不同处理:

内容地址和空短、协议死链和内容死链的可以提交404;

连接超时、网络不稳定导致访问失败、网络错误的可以把数据提取出来,甄别下路径是否正确,这些反馈来的数据就包含了一些之前路径改变的了的旧数据,这部分错误的路径的旧数据,就需要提交404;其余正确路径的数据,就需要重新提交“天级或者周级”;
以上:就是小程序路径变化的旧数据处理及后台反馈的“未收录资源”数据处理流程全部内容,希望对各位开发者有用,细节处或者有不同处理的,欢迎一起沟通进步!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
高级模式
B Color Image Link Quote Code Smilies

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2021-9-23 13:22 , Processed in 0.348833 second(s), 18 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部