《赤裸裸的python与linux操作系统》第六章

　　《赤裸裸的python与linux操作系统》第六章

　　网页手机号抓取程序已经开源，代码已经提交，想学习的话可以进入社区自己用用看，非常棒~非常好~非常好~python手机号抓取数据分析抓取代码下载地址：请转发此条文章，让更多人看到，

　　《赤裸裸的python与linux操作系统》第六章讲到，可以使用pymongo，json库如aresn进行数据抓取。根据采集的字段，进行逐步分析处理，再转换成相应的格式。最后存储在python可读的文件系统中即可。

　　python爬虫实战基础+特点python正则表达式教程-韦恩上将-博客园python爬虫实战-百度经验python3.x版本总结，

　　最简单的方法就是直接用爬虫工具直接抓取。flask框架最容易上手，并且项目也很丰富。

　　web页面最好用requests

　　手机码字，手机仅作参考，有问题可以提出来。首先是知乎爬虫，这是一个不错的点，爬取这个知乎，保留截图的同时，用文字描述，自己可以学习一下http协议。其次是微博扒皮，高难度就是反爬虫什么的。不过我有解决方案，这个就是“违规”，可以换条鱼试试。uc原理我不懂，但是目前感觉是爬虫爬下来，文字被隐藏。

　　感谢邀请。其实爬虫不是最难的事情，关键是实践经验。我先声明，我爬虫底子不厚，最多也就是一年时间拿到的数据来源可能较好吧。主要涉及到web，自定义url，代理池，反爬虫。我曾经也有遇到爬到爬不下来的困惑，后来是思路上找到：先说你，可以看看我的知乎写的《抓包系列》、《抓包整合》两篇文章。我就是先去网站抓包了解，然后去分析，最后去抓取的。

　　在这里说明一下，是如何去分析。如果你准备抓的是vczh大大所说的爬虫特点，你可以看一下vczh大大的回答。你所提到的那几点，我认为对于新手都比较容易接受。爬虫的底层知识普遍不够扎实，这个我也遇到过。有时候真心经验不够，怎么抓也抓不下来。基础知识一下不知道怎么回事，再去研究不仅无效，而且不会有效率。记住，这是你自己的工作，量力而行就好了。