php多线程抓取网页(php中curl_init()的具体使用方法及相关效率比较)
优采云 发布时间: 2022-02-24 15:05php多线程抓取网页(php中curl_init()的具体使用方法及相关效率比较)
php使用curl_init()和curl_multi_init()多线程的速度详解
更新时间:2018-08-15 10:06:55 作者:CC_小硕
本文章主要介绍了php使用curl_init()和curl_multi_init()多线程的速度对比,并结合示例表格详细分析了curl_init()和curl_multi_init()的具体用法及相关效率对比。需要的朋友可以参考以下
本文的例子描述了php使用curl_init()和curl_multi_init()多线程的速度对比。分享给大家参考,详情如下:
curl_init()在php中的作用非常大,尤其是在抓取网页内容或者文件信息的时候。比如之前的文章《PHP使用curl获取header检测并启用GZip压缩》中介绍了curl_init()的威力。
curl_init() 以单线程模式处理事物。如果需要使用多线程模式进行事务处理,那么PHP为我们提供了一个函数curl_multi_init(),就是多线程模式处理事务的函数。
curl_init()和curl_multi_init()的速度对比
curl_multi_init() 多线程可以提高网页的处理速度吗?今天我将通过一个实验来验证这个问题。
我今天的测试很简单,就是抓取网页的内容,需要连续抓取5次,使用curl_init()和curl_multi_init()函数完成,记录两次耗时,并比较得出结论。
首先,使用 curl_init() 单线程连续抓取网页内容 5 次。
程序代码如下:
然后,使用 curl_multi_init() 多线程连续抓取网页内容 5 次。
代码显示如下:
<p>