直观:工具采集文章和urllib3的核心知识看看吧！

　　直观:工具采集文章和urllib3的核心知识看看吧！

　　工具采集文章主要是爬虫。爬虫的话，首先要会使用浏览器的爬虫开发者工具，然后可以使用爬虫工具，结合chrome浏览器的selenium来实现程序的真正爬虫。

　　1、使用浏览器的开发者工具：如上图这种，需要登录，注册，选择你要爬取的网页，创建爬虫。

　　2、结合selenium的selenium库：这个库是和chrome浏览器相互交互的，在chrome浏览器中，右键我的页面，新建标签页或者在不同浏览器中连接到标签页，实现url在新的页面中查看，展现页面。

　　3、使用爬虫工具正则采集网页：通过上图可以看到，页面中的有很多明显的网址，这些网址可以设置成url，比如浏览器访问，在采集框中输入网址，会进入/页面，然后把这个页面内容采集下来。

　　4、通过chrome浏览器的selenium：可以直接采集网页：

　　通过关键词爬取网页并存入待爬列表中.这里的关键词并不只是我们使用中常用的html、ajax、数据库相关，而是用一些高效好用的工具如selenium,chrome,urllib3.这些工具往往可以完成一般爬虫简单的功能，具体可以去akkaallyourwaystosleepwithhtmlandajax,chromewebdriverandselenium2,selenium和urllib3的核心知识看看。以上。