抓取网页数据php(使用PHP的cURL库可以简单和有效地去抓网页。)

　　抓取网页数据php(使用PHP的cURL库可以简单和有效地去抓网页。)

　　使用 PHP 的 cURL 库可以轻松高效地抓取网页。你只需要运行一个脚本，然后分析你爬取的网页，然后你就可以通过编程方式获取你想要的数据。无论您是想从链接中获取一些数据，还是获取 XML 文件并将其导入数据库，甚至只是获取网页的内容，cURL 都是一个强大的 PHP 库。本文主要介绍如何使用这个 PHP 库。

　　启用 cURL 设置

　　首先，我们必须确定我们的 PHP 是否启用了这个库。您可以使用 php_info() 函数获取此信息。

　　如果您可以在网页上看到以下输出，则说明 cURL 库已启用。

　　如果你没有看到它，那么你需要设置你的 PHP 并启用这个库。

　　如果你是在windows平台，很简单，你需要改变你的php.ini文件的设置，找到php_curl.dll，取消之前的分号注释。如下：

　　//取消下在的注释

extension=php_curl.dll

　　如果你在 Linux 下，那么你需要重新编译你的 PHP。编辑时需要打开编译参数——在configure命令中添加“--with-curl”参数。

　　一个小例子

　　从上面的程序我们可以看出，使用CURLOPT_POST来设置HTTP协议的POST方法而不是GET方法，然后用CURLOPT_POSTFIELDS设置POST数据。

　　关于代理服务器

　　下面是一个如何使用代理服务器的示例。请注意其中高亮的代码，代码很简单，我就不用多说了。

　　关于 SSL 和 Cookie