这篇日志主要记录、总结自己写的一个小爬虫,算是自己学习python的小练习吧。
这个爬虫主要实现了爬取qq好友们2018年的说说、提取关键信息并且存入excel文件的功能。
该爬虫使用的python版本是python3。
该爬虫的使用第三方库有selenium、requests、re、openpyxl、time。
其中,selenium库用于登陆访问页面,requests库用于向网页发送请求、re库用于匹配、提取返回包含说说信息的内容,openpyxl库用于储存信息,time库用于计算程序运行时间。
程序源码放在了GitHub上iszff/QQ-Crawler。