可靠的采集神器(如何采集微信公众号后台数据的方法？可靠的采集神器)

　　可靠的采集神器(如何采集微信公众号后台数据的方法？可靠的采集神器)

　　可靠的采集神器在之前文章里我们说过如何采集微信公众号后台数据的方法，在公众号后台上传图片，然后刷新都有人在后台收集数据。但其实微信里的数据还可以采集的更加优质，更加全面。这一篇文章的目的是推荐一个干净的采集工具。先来看效果：接下来我们介绍下获取微信公众号数据的工具。

　　1、下载使用谷歌浏览器，搭梯子。在f12浏览器选择network点击右边箭头，找到micromessenger(资源博客)，你会看到有更新的一些不是很干净的页面，点击点击进去下载。

　　2、使用第三方采集器登录你需要下载的网页，会出现如下界面：点击右边的installnewselenium-downloader(下载采集器)，然后把这里的网址复制粘贴在文章里，最后点击end下载，就可以下载到里面所有的页面。（所以这里你的网址一定要写对，不然你就下载不到的哦~）下载后的页面，我们以下面的爬取了微信公众号数据为例子。

　　选中一个网页，左键点击右下角的installselenium-downloader。接下来就有网页自动发来的请求：点击postmessage选择一个最后返回的域名。接下来直接调用即可把所有页面抓取下来。抓取下来后，我们直接把抓取好的页面放到工具里面，最后勾选下方的submit：。

　　3、运行记录（效果和本篇文章文末的抓取图片效果一样）采集刚刚说了可以用抓包工具抓取，这里是直接抓取这些网页的：数据抓取完毕后，我们下载下一个工具，然后用它来下载页面数据。第三方采集器会把抓取到的数据存在数据库里面。第三方采集器的下载的数据最大只支持200页。抓取到200页后就没有下载次数限制了，记住这一点：。

　　4、注意事项

　　1）或许有的同学想下载多个网页数据，但微信中的数据都不全部放在后台采集。你可以上传大于200页的数据到工具里面，再找到对应网页，手动采集就可以了。不过我上传了200页的数据，但后台是不会采集，如果你觉得这样更方便的话，请换工具，反正都是一样的操作。

　　2）用谷歌浏览器的话，谷歌浏览器需要加载一个扩展：webxhr2它是谷歌一个安全专门的浏览器扩展，用它来在firefox浏览器上安装插件可以更安全的在后台抓取数据，我正在实验中。

　　3）第三方采集器一般都有很多工具，我用得最多的是谷歌浏览器自带的抓包工具，基本上你想要抓取的任何网页内容都可以抓到，比如从某个网页获取iframe的链接等等。但官方的“列表页抓取工具”这个对于我来说太麻烦了，所以就没有在他上面采集，暂时我也不打算扩展。你有那个需求也可以考虑扩展其他工具。需要提醒的是，谷歌浏览器应该还没有被墙，第三方采集器可。