请选择 进入手机版 | 继续访问电脑版

利用百度站长工具链接分析提高蜘蛛抓取效率

  [复制链接]
发表于 2016-5-11 09:08:03 | 显示全部楼层
版主给力
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-5-11 09:20:12 | 显示全部楼层
zixiv0406 发表于 2016-5-10 22:25
斯郭易,先马后看。
--------------------------------------------------------------------------------- ...

正则的话,用awk分隔符号斜杠,导出第三个域。然后分隔符号点号,导出最后两个域,得到主域名。

点评

那时候我才刚开始接触正则,走了不少弯路  详情 回复 发表于 2016-5-11 09:26
回复 支持 反对

使用道具 举报

发表于 2016-5-11 09:26:30 | 显示全部楼层
响1亮2的3名4字 发表于 2016-5-11 09:20
正则的话,用awk分隔符号斜杠,导出第三个域。然后分隔符号点号,导出最后两个域,得到主域名。 ...

那时候我才刚开始接触正则,走了不少弯路

点评

于是你就弯了?  详情 回复 发表于 2016-5-11 09:35
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-5-11 09:35:24 | 显示全部楼层
zixiv0406 发表于 2016-5-11 09:26
那时候我才刚开始接触正则,走了不少弯路

于是你就弯了?
回复 支持 反对

使用道具 举报

发表于 2016-5-11 09:40:07 | 显示全部楼层
不错,顶一个
回复 支持 反对

使用道具 举报

发表于 2016-5-11 09:43:43 | 显示全部楼层
有点看不懂,唉
回复 支持 反对

使用道具 举报

发表于 2016-5-11 09:57:27 | 显示全部楼层
分析思路对,但是有更简便的方法。

点评

嗯,肯定是有的,本文旨在介绍方法。结合简单的脚本可以更快地完成。但是展开的话篇幅就太长了。  详情 回复 发表于 2016-5-11 10:43
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-5-11 10:43:48 | 显示全部楼层
mzmwmzmw 发表于 2016-5-11 09:57
分析思路对,但是有更简便的方法。

嗯,肯定是有的,本文旨在介绍方法。结合简单的脚本可以更快地完成。但是展开的话篇幅就太长了。
回复 支持 反对

使用道具 举报

发表于 2016-5-11 10:59:59 | 显示全部楼层
表示在小站  很多东西用不到,不过值得学习
回复 支持 反对

使用道具 举报

发表于 2016-5-13 10:47:36 | 显示全部楼层
看到了好多我以前做外贸用到的小技巧
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|Archiver|Baidu Inc.

GMT+8, 2022-1-19 16:21 , Processed in 0.287428 second(s), 15 queries .

Powered by Discuz! X3.2

© 2001-2011 Comsenz Inc.

返回顶部