Jquery中文网 www.jquerycn.cn
Jquery中文网 >  脚本编程  >  php  >  正文 PHP使用swoole实现多线程爬虫

PHP使用swoole实现多线程爬虫

发布时间:2020-10-11   编辑:www.jquerycn.cn
jquery中文网为您提供PHP使用swoole实现多线程爬虫等资源,欢迎您收藏本站,我们将为您提供最新的PHP使用swoole实现多线程爬虫资源
在swoole中,php可以借助其启动子进程的方式,实现php的多进程:

<?php $s_time = time(); echo '开始时间:'.date('H:i:s',$s_time).PHP_EOL; //进程数 $work_number=6;   // $worker=[];   //模拟地址 $curl=[     'https://blog.csdn.net/feiwutudou',     'https://wiki.swoole.com/wiki/page/215.html',     'http://fanyi.baidu.com/?aldtype=16047#en/zh/manager',     'http://wanguo.net/Salecar/index.html',     'http://o.ngking.com/themes/mskin/login/login.jsp',     'https://blog.csdn.net/marksinoberg/article/details/77816991' ];   //单线程模式 // foreach ($curl as $v) { // echo curldeta($v); // }   //创建进程 for ($i=0; $i < $work_number; $i  ) {     //创建多线程     $pro=new swoole_process(function(swoole_process $work) use($i,$curl){         //获取html文件         $content=curldeta($curl[$i]);         //写入管道         $work->write($content.PHP_EOL);     },true);     $pro_id=$pro->start();     $worker[$pro_id]=$pro; } //读取管道内容 foreach ($worker as $v) {     echo $v->read().PHP_EOL; }   //模拟爬虫 function curldeta($curl_arr) {//file_get_contents     echo $curl_arr.PHP_EOL;     file_get_contents($curl_arr); }   //进程回收 swoole_process::wait();   $e_time = time(); echo '结束时间:'.date('H:i:s',$e_time).PHP_EOL;   echo '所用时间:'.($e_time-$s_time).'秒'.PHP_EOL; ?>

多线程执行结果:

4d8084991537fd94f8576f37ac80f21.png

作为对比,单线程结果:

a3d1d04d9063f5c55fc958a0e72162b.png

提升十分明显!

更多PHP相关知识,请访问PHP教程!

以上就是PHP使用swoole实现多线程爬虫的详细内容,更多请关注jquery中文网其它相关文章!

  • 本文转载于:csdn,如有侵犯,请联系jquerycn@qq.com删除
  • 您可能感兴趣的文章:
    PHP使用swoole实现多线程爬虫
    Python 爬虫学习系列教程
    python爬虫一般都爬什么信息
    python爬虫能做什么
    python的爬虫是什么意思
    python爬虫可以自学吗
    《Python2爬虫入门教程指南》(系列教程)
    python爬虫有哪些书
    Python3爬虫入门:Robots协议
    python入门能做什么

    [关闭]