文章采集工具：baiducolas文章2.1爬取截图2.2获取答案

　　文章采集工具：baiducolas文章2.1爬取截图2.2获取答案

　　文章采集工具：baiducolas

　　一、获取github上的pythonproject文章2.1爬取截图2.2获取答案2.3爬取leetcode刷题页面2.4爬取得分排名前20的用户文章

　　二、爬取工具

　　1）googledocsandmax一个googledocs的搜索api集合，支持全球各种主流的搜索引擎。

　　2）siteclient对一个页面，进行频道分割、词语提取等操作。

　　3）sitespider一个可用于解析网站资源的工具，一般常用于爬虫。

　　三、机器学习3.1找出你的排名、点赞数等数据3.2数据分析3.3可视化

　　推荐几个吧，

　　知道几个，不过都要收费的。感兴趣的话，可以爬一爬对比一下吧，比如豆瓣，我的博客，貌似豆瓣在国内的爬虫是收费的，不过你要是从外部接入的话，估计会便宜一些。

　　我们之前常用网页版的搜索sogoumap地图，可以搜出很多数据。

　　新上线的数据采集工具。这个采集效率比较高！有数据库管理，其他高级功能。

　　webscraper

　　你可以直接套用爬虫思路去找javascript结构后的googleapi

　　最近写了一套爬虫，

　　酷狗网，以前搜索英文歌的网站，每到歌曲更新时，网站就有海量更新动态，从这个角度来说，老歌都是不值钱的！这时候就要爬虫来解决问题了，可以把歌曲直接抓取下来保存在服务器上，