php使用curl模拟多线程实现批处理功能示例
更新时间：2019年07月25日 11:57:50 作者：xshang
这篇文章主要介绍了php使用curl模拟多线程实现批处理功能,结合实例形式分析了php使用curl模拟多线程爬取百度与谷歌相关操作方法,需要的朋友可以参考下
本文实例讲述了php使用curl模拟多线程实现批处理功能。分享给大家供大家参考，具体如下：
php模拟多线程用到curl库，这个库很强大，可以做好多事，比如模拟登陆，文件上传/下载,数据采集等。
下面是我的代码，很简单，有些还功能还不会用。
<?php
$node_urls=array('http://www.baidu.com','http://www.google.com.hk');
$ch=array();
$mh=curl_multi_init();
$ch[0]=curl_init($node_urls[0]);
$ch[1]=curl_init($node_urls[1]);
for($i=0;$i<2;$i++)
{
curl_setopt($ch[$i],CURLOPT_RETURNTRANSFER,1);
curl_multi_add_handle($mh,$ch[$i]);
}
$running=NULL;
do{
usleep(10000);
curl_multi_exec($mh,$running);
}while($running>0);
$res=array();
for($j=0;$j<2;$j++)
{
$res[$j]=curl_multi_getcontent($ch[$j]);
}
for($k=0;$k<2;$k++)
{
curl_multi_remove_handle($mh,$ch[$k]);
}
curl_multi_close($mh);
print_r($res);
?>
这段代码就是并行爬取百度和谷歌的代码，以后再慢慢完善。
还有好多事要做。
更多关于PHP相关内容感兴趣的读者可查看本站专题：《php curl用法总结》、《PHP网络编程技巧总结》、《PHP数组(Array)操作技巧大全》、《php字符串(string)用法总结》、《PHP数据结构与算法教程》及《PHP中json格式数据操作技巧汇总》
希望本文所述对大家PHP程序设计有所帮助。
相关文章
几个PHP漏洞小结，从事php开发的朋友可以参考下2012-02-02
PHP开发中常见的安全问题详解和解决方法（如Sql注入、CSRF、Xss、CC等）
这篇文章主要介绍了PHP开发中常见的安全问题详解和解决方法，详细介绍了例如Sql注入、CSRF、Xss、CC等攻击手段的背景知识以及解决方法,需要的朋友可以参考下2014-04-04
这篇文章主要介绍了PHP的中引用的概念，帮助大家更好的理解和学习使用PHP，感兴趣的朋友可以了解下2021-04-04
大数据量的问题是很多面试笔试中经常出现的问题，比如baidu google 腾讯 这样的一些涉及到海量数据的公司经常会问到2011-05-05
这篇文章主要介绍了php获取QQ头像并显示的方法,提供了两种方法供大家选择,是非常实用的技巧,需要的朋友可以参考下2014-12-12
这篇文章主要介绍了部署PHP项目应该注意的几点事项，有需要的朋友可以参考一下2013-12-12
PHP写的求多项式导数的函数代码，需要的朋友可以参考下2012-07-07
抓ajax异步内容的页面和抓普通的页面区别不大。ajax只不过是做了一次异步的http请求，下面的示例，大家可以参考下2014-09-09
这篇文章主要介绍了php中的除数如何取整,需要的朋友可以参考下2014-04-04
本章简要介绍一些Zend引擎的内部机制，这些知识和Extensions密切相关，同时也可以帮助我们写出更加高效的PHP代码。2011-09-09
最新评论