php curl抓取网页内容( php中常用都实现更复杂的传输功能（一） )

　　php curl抓取网页内容(

php中常用都实现更复杂的传输功能（一）

)

　　PHP扩展CURL使用详解

　　更新时间：2014-06-20 09:32:29 投稿：hebedich

　　CURL 是一个文件传输工具，它使用 URL 语法在命令行模式下工作。它支持多种协议。支持认证功能。常用在php中实现更复杂的传输功能。

　　实现的功能：

　　1、实现远程访问和采集内容

　　2、实现PHP网页版FTP上传下载

　　3、实现模拟登录：去一个邮件系统，curl可以模拟cookies

　　4、 实现接口对接（API）、数据传输等：通过平台发送短信，对传输的信息进行抓取和传输。

　　5、 实现模拟Cookie等：部分属性需要登录后才能操作。

　　如何使用CURL函数：

　　默认情况下，PHP 不支持 CURL。需要在php.ini中开启该功能

　　;extension=去掉php_curl.dll前面的分号

　　1 整个操作的第一步是用cur_init()函数进行初始化

　　

$curl = curl_init(‘www.jb51.net')

　　2.使用 curl_setopt() 函数设置选项。

　　3.设置后，执行事务 curl_exec($curl);

　　4 最后关闭 curl_close();

　　使用PHP CURL实现传输获取功能（后传输方式）：获取远程网页数据

　　

$user = "admin";

$pass = "admin";

$curlPost = "user=$user&pass=$pass";

$ch = curl_init(); //初始化一个CURL对象

curl_setopt($ch, CURLOPT_URL, "http://localhost/edu/login.php");

//设置你所需要抓取的URL

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 0);

//设置curl参数，要求结果是否输出到屏幕上，为true的时候是不返回到网页中

假设上面的0换成1的话，那么接下来的$data就需要echo一下。

curl_setopt($ch, CURLOPT_POST, 1);

//post提交

curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);

$data = curl_exec($ch);

//运行curl,请求网页。

curl_close($ch);

[/code]

　　实现远程模拟登录最基本的部分。

　　curl 还需要配置用户名和密码，但是被浏览器隐藏了。

　　============================================== ==============================

　　curl 模拟登录

　　模拟登录：无需登录php100论坛即可查看相应信息。

　　分析登录字段--->登录后保持cookie状态-->读取cookie并跳转到相关页面-->抓取次数

　　1、模拟登录后创建文件保存cookie内容

　　2、通过读取生成的cookie内容模仿用户登录状态

　　3、前往相关页面获取所需内容

　　tempname 创建一个临时文件

　　tempnam() 函数创建一个具有唯一文件名的临时文件。如果成功，该函数返回新的临时文件名。如果失败，则返回 false。

　　tempnam(dir,prefix)

　　参数说明

　　目录是必需的。指定创建临时文件的目录。

　　前缀是必需的。指定文件名的开头。

　　相当于 fopen  fwirte  fclose

　　它可以返回一个布尔值。使用第三方登录你的QQ和msn是非常危险的，因为它可以记录你的登录状态并抓取你的用户名和密码。

　　使用CURL模拟登录PHP100论坛

　　1、分析输入框字段名和登录需要的字段数

　　2、保存cookie模拟登录获取会员金币数量

　　代码：

　　

//初始化一个 cURL 对象

$curl = curl_init();

//设置你需要抓取的URL

curl_setopt($curl, CURLOPT_URL, " http://www.baidu.com ");

//设置cURL 参数，要求结果保存到字符串中还是输出到屏幕上。

curl_setopt($curl, CURLOPT_RETURNTRANSFER, 0);

//运行cURL，请求网页

$data = curl_exec($curl);

//关闭URL请求

curl_close($curl);

$user = "admin";

$pass = "admin100";

$curlPost = "user=$user&pass=$pass";

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, " http://localhost/curl/login.php ");

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 0);

curl_setopt($ch, CURLOPT_POST, 1);

curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);

$data = curl_exec($ch);

curl_close($ch);

?>

if($_POST['user']=="admin"){

echo "";

}else{

echo "";

}

//print_r($_POST);

?>