首页 > Web开发 > 详细

ssh curl 命令理解

时间:2016-01-01 12:55:15      阅读:244      评论:0      收藏:0      [点我收藏+]

使用一条命令抓取一本小说

curl "http://www.23hh.com/book/1/1019/"|iconv -c -f gbk -t utf8 |sed ‘s/"/\n/g‘|grep -P ‘^\d+\.html‘|awk ‘{if(NR>0){print "http://www.23hh.com/book/1/1019/"$0}}‘|while read l;do curl $l 2>/dev/null|iconv -c -fgbk -tutf8|sed -n -e ‘2p‘ -e‘15p‘|sed -e ‘s/<[^>]*>/\n/g‘ -e ‘s/&nbsp;/ /g‘;done > data.txt  

转载  http://blog.csdn.net/tsxw24/article/details/9148009

ssh curl 命令理解

原文:http://www.cnblogs.com/jayruan/p/5093118.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!