首页 > Shell脚本, 网站数据分析 > Shell学习之Lynx
2013八月8

Shell学习之Lynx

 

shell学习之awk

 

Shell学习笔记之grep

 

xargs命令-shell学习笔记

 

find的命令 – shell学习笔记

学习了下lynx命令,下面来总结下,lynx是遍历网页上的链接

遍历一个页面上的链接

1

 

 

$ lynx -dump "http://www.hozseo.com"

 

查询一个页面上的内部链接数量

2

 

$ lynx -dump "http://www.hozseo.com" |  grep -o "http://www.hozseo.com/" | wc -l

 
 

 

查询一个页面上的链接数量

1

 

$ lynx -dump "http://www.hozseo.com" |  grep -o "http.*" | wc -l

 
查询一个页面上的导出站外链接数量
 
4

 

 

 

$ lynx -dump "http://www.hozseo.com" | grep -o "http:.*" | grep -v "http://www.hozseo.com/" | wc -l

 
查看网页的Head信息
 
 
 
5
$ lynx -dump -head "http://www.hozseo.com"
 
查看网页的源代码
 
6
 
$ lynx -source "http://www.hozseo.com"
 
以上的仅是方法,如果你要问我你要用这些命令来干嘛,sorry!我也不知道你能干什么,数据分析的重要就是首先要知道你的需求你的目的,这些仅仅是处理数据简便一点,而不是数据分析。真正的分析在于你想要的。

 

 

 

 

文章作者:houzhi
本文地址:http://www.hozseo.com/316.html
版权所有 © 转载时必须以链接形式注明作者和原始出处!

本文目前尚无任何评论.

发表评论

使用新浪微博登陆