1、现在在任何浏览器中 打开微博登录
2、按F12或者在页面右键选着”审查元素” 找到Network 选项
3、然后刷新下 下页面
4、然后你会看到。哦买噶。。。我滴个神 这啥玩意。。。。
5、点击下这个home?wvr=5
6、这玩意就是我们要的东西(放心我盗不了你的号,这个加密用了md5的算法破不了。。。。。)赋值这个额cookie注意“cookie:”这个就不要了。。。。。。。复制后面的值就可以了(记得要点红色的按钮啊。。。。)
废话了那么多总之:就是为了获取cookie
7、选这一条评论小于500的微博URL,去看看他们在说些神马!!!!现在我只能帮你到这了
8、哥姐,剥个橘子,他就会爬完了。。。。。
9、是不是评论都出来的了。。。。
10、打开你刚刚启动程序的目录看看看是不是多了一个data.txt文件
11、右键他。。。。。。以excel方式打开
注意: 1、这个目前还在完善中千万不能盲目的瞎用啊,小心浪人封你号的。
2、如果有错麻烦截个图发给我啊。。
3、如果你更好的建议也可以随时m我。。。
4、这个在抓取精度上还不能保证完全的百分百我简单的分析了有儿
4.1、新浪把有些敏感评论给删除(或别人看不到)
4.2、程序处理异常导致没有收录
QQ:865252662 e-mail:gametheworld@126.com
后期优化:
1、 抓取失败的链接重新在走一遍
2、 能另存为
3、 把分词加上
链接:http://url.cn/NQnsGp (密码:Rf0a)
原文:http://www.cnblogs.com/nimeide/p/3749917.html