php多线程抓取网页试过((

　　php多线程抓取网页试过((

　　php多线程抓取网页试过多线程的同学们都知道在抓取网页的时候，经常会遇到线程等待抓取数据的情况，同时开启多个线程抓取数据的话时间就会很长，这个时候使用代理就很方便，我们有三种方式可以代理，分别是：代理服务器、代理服务器的子进程和v2代理，我们这次主要就先介绍下代理服务器。

　　一、基本原理代理服务器的主要原理其实就是一种网络代理功能，假设访问a网站的时候，首先抓取了a网站的所有的数据，

　　1)，a再分别去访问b、c、d。这样就能多个客户端都抓取同一个页面了。

　　一般的代理客户端通过网络连接来接收服务器端的报文，

　　0)。这样a服务器就能访问b、c、d服务器的全部页面。当然我们也可以转发客户端a的地址给代理，来进行多个连接，例如：在发布商可能设置为223.37.2.3，假设客户端a设置为223.37.2.3，这样能够以b为代理服务器转发b服务器的全部报文。当然也可以直接把a地址转发给代理服务器，这样就可以访问整个程序中的所有页面。

　　例如123.162.55.40就可以用3.4.1.1来代理123.162.55.40。另外还可以把中间页的链接中继到代理服务器，这样可以跟客户端a直接通信。

　　二、代理服务器代理服务器也有proxy，那么这个proxy服务器怎么用呢？首先我们要把网站域名解析成二进制数据来存储。创建一个proxy对象实例proxy，同时在代理服务器对象proxy1()中定义对应的server指令。2.1创建代理服务器proxy1()定义访问代理服务器时传递给代理的数据格式。方法一参数：1-同域名地址2-对应网站ip地址,域名加ip地址，例如：北京ip：123.162.55.40网站：北京2.2proxy的基本方法proxy1()将代理服务器同域名/网站ip地址进行映射创建子代理，然后在代理对象中的execve()函数中进行fromname()方法的一键同域名路径创建子代理实例proxy2()获取该被服务器ip地址、网站路径，再进行mgsql路径的解析2.3proxy的基本方法trymain()方法调用子代理，在getserver()方法中进行fromname()方法的一键同域名路径对应函数request=proxy1();request.connect(sessionid);if(request.status==true){request.database_addr=sessionid.address;if(sessionid.address==true){request.openserialtype(request.database_addr);}}}catch(ex。