js提取指定网站内容(反(反爬虫)用不完的遍布世界的毫秒级代理IP目标网站)

　　js提取指定网站内容(反(反爬虫)用不完的遍布世界的毫秒级代理IP目标网站)

　　分析全球反（反爬虫）取之不尽的毫秒代理IP

　　目标网站：http：说实话，爬了多少个ip网站，这个网站的ip可用率很高，但同时，反爬机制也有点高端如果说是同一个IP用于频繁定向，网站会被Ban的爬取目标爬取。表面上看不明显，但实际上是js加载的动态页面，不像其他动态页面。没有后续加载，网页刷新后1秒内加载js，所以爬取的网页是没有被jsted的源码，即使解析正确，获取到的ip也是无效的，所以如果要重新更新随机使用的代理ip请调用此方法。每次调用都会随机抓取ip并将其写入文件以便下次读取尝试： for i in range(20): self.carwl_ip() cmd = input( ****** *** *是否永久保存********** 默认：临时保存为 ip.ini 文件 每次更新 ip.ini 文件都会清空并更新 1.MongoDB 2.MySQL 3.另存为.txt文件（其他key代表一行默认ip.ini配置文件，相当于每次随机改爬取的随机ip :return: 返回一个字典格式如下，可以直接放在参数{https:https

　　中

　　作为请求中的代理

　　160