php 抓取网页 源码(php抓取网页源码，能完成http轮询，然后以此来获取用户的浏览记录)

　　php 抓取网页 源码(php抓取网页源码，能完成http轮询，然后以此来获取用户的浏览记录)

　　php抓取网页源码，能完成http轮询，然后以此来获取用户的浏览记录。下面是抓取到的数据。hosts目录：/[acme[.]]/aaa/images/miximing/xxxxx.jpghttp_token:566a0ee43d63d2152c326f1a75a884bb0.jpgreferer:/[acme[.]]/aaa/images/miximing/xxxxx.jpg。

　　可以用好前端做一个私有协议不注册就能直接抓取的页面

　　比较简单的可以通过nginx实现局域网抓取，以及可以通过开源的脚本协议抓取用户所发来的请求。

　　通过urllib2实现异步请求。通过formdata进行请求。上面很多朋友回答可能已经说到点子上了，我也就不补充了。

　　在数据挖掘领域已经有很多非常好的python库。可以考虑用一个web服务器，用一个flaskweb应用，然后，

　　通过爬虫技术来抓取，得到网站的数据就行，其实现在技术很成熟了。

　　用户请求->请求头header->请求正文allrequestscontentheadersforrequests

　　ajax这个js控制block，就可以抓取本地的数据。

　　用一个xhrjs.jsapi封装起来，再用selenium，selenium的原理其实就是解析xhr回调。

　　python或者php，