php可以抓取网页数据吗(php可以抓取网页数据吗？同一个网站怎么抓取)

　　php可以抓取网页数据吗(php可以抓取网页数据吗？同一个网站怎么抓取)

　　php可以抓取网页数据吗？同一个网站怎么抓取网页不同地方的数据？刚才我也有同样的问题，搜索出来的答案大都不靠谱，后来看了一下源码，发现在php内部有函数phpstorm_set_request_http_status这个函数，可以用来指定爬取到的网页时候是否使用http协议的header方式请求，并且可以设置默认的header信息。

　　比如这样的请求：php:login@102.74.241.45\yourprofile.php(phpstorm_init_http_status)另外抓取java的返回结果也是可以用phpstorm_set_request_http_status指定的。

　　php中request对象可以接受不同种协议的http请求：request对象可以接受任意格式的httpheader，其中的http.host头指定了它所请求的协议的host，如果不指定host，默认为get请求。其中还有一个参数为header_method，如果在request.requestheader中指定了该参数，那么最终请求时会使用这个header_method方法。

　　如果没有指定header_method，那么请求所有的httpheader都使用同一个请求方法，php处理这些http请求时会按照协议的相应原则处理。1.基本请求stringrequestheader;httpuser-agentrequestuser-agent。2.postrequestpostrequestheader;httpuser-agentpost请求后如果请求失败，会抛出一个posterror异常；如果请求正常则会抛出一个responseonehandler异常。

　　3.getrequest如果文档是通过正则表达式获取的，必须在header中指定正则匹配规则，以下为正则表达式示例：publicuseragent{protocol:'http/1.1';}4.postdeleterequest如果请求失败，会抛出一个posterror异常；如果请求成功则会抛出一个responseonehandler异常5.postdeleteoptions请求的参数可以通过简单的params传递给服务器，必须设置正则匹配规则。