php curl抓取网页数据(检查PHP是否CURL在PHP的主配置文件库中的应用)

　　php curl抓取网页数据(检查PHP是否CURL在PHP的主配置文件库中的应用)

　　PHP的Curl库用于获取网络上的资源，就像模拟平时打开浏览器一样，可以很方便的抓取网页上的信息。同时这个库还提供了多种设置，可以设置各种HTTP协议中的参数。使用CURL，可以完全模拟用户在页面上登录、浏览、发送信息、编写各种脚本。

　　检查 PHP 是否加载 CURL

　　在 PHP 的主配置文件 php.ini 中，确保 curl 已打开。

　　第一个例子

　　让我们用curl抓取施博文的博客首页

　　以上代码可以得到一个页面的源代码，结合PHP强大的正则表达式，可以很方便的从页面中提取一些数据。当然，如果在url地址后面加参数，可以用get方法提交参数。

　　邮寄资料

　　为了一次性提交大量数据，同时为了更加保密，通常的做法是使用post方式提交数据。使用 curl 库，您还可以轻松模拟 post 方法提交。假设要提交的数据以关联数组的形式存储在数据中。在 $ 数据中。

　　在上面的代码中，第一行表示数据应该通过post提交，第二行是存储在关联数组中的数据对。发送这个请求时，$data 中的数据会自动以 post 请求的格式发送。.

　　设置 User-Agent、Cookie 和 Referer

　　通常，一个网站记录用户的在线状态是用cookie信息记录的，而User-Agent和Referer也用来判断访问者是否有权限读取相应的信息，比如“热链”功能，就是验证HTTP头中的Referer信息来判断。curl还提供了一个方法让我们修改这些信息，如下：

　　模拟登录百度账号

　　博主编写的《*敏*感*词*登录系统》广泛使用curl来模拟用户登录和登录。登录部分收录了大部分日常使用的curl库的常见例子，而且这个系统是完全开源的，可以看这里的代码（Github）。

　　其他功能

　　PHP的curl库除了上面提到的一些常用方法外，还提供了ssl连接、文件上传(put)方法等各种功能，可以在PHP官方手册页找到相关介绍：

　　PHP 文档 - 卷曲