采集文章内容(采集文章内容太麻烦了，库里用api来抓取数据)

　　采集文章内容(采集文章内容太麻烦了，库里用api来抓取数据)

　　采集文章内容太麻烦了，特别是需要时时挖掘的公众号，所以有必要利用技术手段抓取整合到单独的技术库里，用api来抓取数据。技术api库在此公众号回复“api”即可免费获取。准备工作需要抓取的公众号提供了公众号的分类，关注，粉丝，历史文章阅读，点赞等基本数据，并且会加上标题来辅助抓取。在公众号中回复“地区”获取地区列表，以及其中的一部分。

　　然后通过ga-spuds插件从网络爬取返回的代码，用于定位目标公众号。爬取对象nodejs实现代码constattrs=attr('platform','web')constattrs=attr('ip','内网')constmaps=[{'platform':'web','ip':'本地ip'},{'platform':'本地ip','ip':'内网ip'},{'platform':'外网','ip':'外网ip'}]constdb={}//db（网关地址）,ga-spudsmap:{'platform':'uc','ip':'uc'},seleniumdriver={}//seleniumdriver(脚本)，这里把ip地址换成其它地址localhost:8080,'platform':'web','ip':'uc'}接下来列出抓取的过程，实现api接口数据传输。

　　第一步：去爬取地区列表页，并使用地区显示当前选择的地区人数第二步：爬取历史文章分类列表页并使用分类显示当前分类中文章数量第三步：抓取历史文章阅读列表页并使用阅读数量显示当前数量constattenderest={'platform':'web','ip':'内网'}forkeyinrange(1,9):forvalueinrange(1,9)://地区列表页localhost:8080,'platform':'web',ip:'内网'//历史文章列表页localhost:8080,'us':'uc','ea':'北京','ja':'河南','ca':'江苏','si':'山东','zh':'福建','gu':'安徽','ie':'湖南','jn':'江西','xia':'湖北','la':'山西','sy':'河南','jie':'湖南','a':'四川','tj':'江西','xiao':'浙江','yu':'江苏','qu':'安徽','sh':'江西','la':'河南','gui':'湖北','nj':'河南','xu':'山东','tj':'江西','zhang':'福建','li':'江西','man':'福建','qu':'江西','yu':'陕西','xiao':'陕西','ju':'四川','wu':'云南','xy':'河南','xie':。