算法自动采集列表页简介页推荐页和最近页的爬虫python

　　算法自动采集列表页简介页推荐页和最近页的爬虫python

　　算法自动采集列表页简介页推荐页和最近页的爬虫python实现，第二天使用selenium实现效果1。爬虫：爬取24万条微信好友聊天记录-python-伯乐在线2。分析：列表页是通过人脸识别技术做的识别2-1。提取人脸，2-2。提取微信昵称、微信地区、分组信息2-3。提取人脸2-4。提取人脸识别-selenium小工具课程_伯乐在线3。

　　实现目标3。1。爬取24万条微信好友聊天记录3。2。分析及合并微信昵称、微信地区、分组信息3。3。爬取每个用户自带的群2。提取人脸3。1。抓取好友姓名，爬取昵称，分组信息3。2。提取人脸3。3。分析及合并，爬取每个用户自带的群2。1。抓取好友姓名，爬取昵称，分组信息3。2。提取人脸3。3。抓取地区信息2。

　　提取昵称、分组信息3。1。提取好友地区信息4。代码分析4。1。抓取昵称4。2。提取昵称和微信昵称4。3。提取微信昵称4。4。分组信息4。5。抓取每个用户自带的群2。提取昵称、分组信息5。学习笔记2。1。抓取昵称抓取昵称后代码：#-*-coding:utf-8-*-importrequests#爬取24万条微信好友聊天记录#给好友打标签#一共爬取25万个男用户的聊天记录#好友类型ex1=requests。

　　get('thread',headers=headers)#用户简介ex2=requests。get('thread',headers=headers)#关键字，男/女#抓取人脸ex3=requests。get('thread',headers=headers)#发送消息和发送长文件ex4=requests。

　　get('thread',headers=headers)#人脸识别t=requests。get('thread',headers=headers)#获取对方接收的session#获取每个用户自带的群#加入的群越多越好#运行python爬虫的环境：python3。6pip3installseleniumpip3installmultiprocessingfrompilimportimage#特殊js特性：'''(不再看)'''html=python3。

　　6imgurl=';uid=35853&name=jullin'#手机微信号以及昵称ex3=python3。6img_format='png'#获取共计24万条微信聊天记录名字"""抓取好友的昵称"""#发送自定义短信，获取昵称#。

　　1、注册爬虫抓取28万条微信好友的*敏*感*词*#

　　2、爬取微信*敏*感*词*爬取好友的昵称#

　　3、爬取微信好友的发送的自定义短信#第一种，

　　4)applewebkit/537.36(khtml,likegecko)chrome