PHP使用pcntl_fork实现多进程下载图片的方法
网络编程 2021-07-05 09:50www.168986.cn编程入门
这篇文章主要介绍了PHP使用ptl_fork实现多进程下载图片的方法,较为详细的分析了ptl_fork的原理与用法,以及使用ptl_fork实现多进程下载图片的方法,非常具有实用价值,需要的朋友可以参考下
本文实例讲述了PHP使用ptl_fork实现多进程下载图片的方法。分享给大家供大家参考。具体分析如下:
PHP ptl_fork — 在当前进程当前位置产生分支,子进程,译注:fork是创建了一个子进程,父进程和子进程 都从fork的位置开始向下继续执行,不同的是父进程执行过程中,得到的fork返回值为子进程号,而子进程得到的是0.
注意:PHP有个ptl_fork的函数可以实现多进程,但要加载ptl拓展,而且只有在linux下才能编译这个拓展.
1.首先在ubuntu下编译ptl.so,我的ubuntu下找不到ptl的包,于是创建一个文件夹下载了整个PHP包,在里面找到了ptl包运行如下命令,代码如下:
代码如下:
# mkdir php
# cd php
# apt-get source php5
# cd php5-(WHATEVER_RELEASE)/ext/ptl
# phpize
# ./configure (注一)
# make
# make install phpize 命令是用来准备 PHP 外挂模块的编译环境的
# cd php
# apt-get source php5
# cd php5-(WHATEVER_RELEASE)/ext/ptl
# phpize
# ./configure (注一)
# make
# make install phpize 命令是用来准备 PHP 外挂模块的编译环境的
成功的安装将建立 extname.so 并放置于 PHP 的外挂模块目录中(预设存放于 /usr/lib/php/modules/ 内),需要调整 php.ini,加入 extension=extname.so 这一行之后才能使用此外挂模块.
例:
代码如下:
void ptl_exec(string $path [,array $args [,array $envs ]])
ptl_exec — 在当前进程空间执行指定程序,代码如下:
代码如下:
$cmds=array(
array('/home/jerry/projects//test2.php'),
array('/home/jerry/projects//test3.php')
);
foreach($cmds as $cmd){
$pid=ptl_fork();
if($pid==-1){
//进程创建失败
echo '创建子进程失败时返回-1';
exit(-1);
}
else if($pid){
//父进程会得到子进程号,所以这里是父进程执行的逻辑
ptl_wait($status,WNOHANG);
}
else{
//子进程处理逻辑
sleep(5);
ptl_exec('/usr/bin/php',$cmd);
exit(0);
}
}
array('/home/jerry/projects//test2.php'),
array('/home/jerry/projects//test3.php')
);
foreach($cmds as $cmd){
$pid=ptl_fork();
if($pid==-1){
//进程创建失败
echo '创建子进程失败时返回-1';
exit(-1);
}
else if($pid){
//父进程会得到子进程号,所以这里是父进程执行的逻辑
ptl_wait($status,WNOHANG);
}
else{
//子进程处理逻辑
sleep(5);
ptl_exec('/usr/bin/php',$cmd);
exit(0);
}
}
例,实例多图片同步下载,代码如下:
代码如下:
#!/usr/bin/php
<?php
// 需要抓取的网页地址
$url = 'https://.jb51.';
$content = file_get_contents($url);
preg_match_all('/<imgs+src="(.*?)"/', $content, $matches,PREG_SET_ORDER);
echo "已发现".count($matches)."张图片n";
list($sm, $ss) = explode(" ", microtime());
foreach ($matches as $k => $val)
{
$pid[$k] = ptl_fork();
if(!$pid[$k])
{
download($url, $val);
// 子进程要exit否则会进行递归多进程,父进程不要exit否则终止多进程
exit(0);
}
if ($pid[$k])
{
// ptl_waitpid($pid[$k], $status, WUNTRACED);
}
}
echo "下载完成n";
list($em, $es) = explode(" ", microtime());
echo "用时:",($es+$em) - ($ss + $sm),"n";
/**
* 抓取网页图片
*
*/
function download($url, $val)
{
$pic_url = $val[1];
if (strpos($val[1], '//') !== false)
{
;
}
elseif (preg_match('@^(.*?)/@', $val[1], $inner_matches) == 0)
{
$pic_url = $url.$val[1];
}
elseif (preg_match('@[:.]@', $inner_matches[1], $tmp_matches) == 0)
{
$pic_url = $url.$val[1];
}
$pic = file_get_contents($pic_url);
if ($pic === false)
{
return;
}
preg_match('@/([^/]+)$@', $pic_url, $tmp_matches);
// 可使用assert处理异常
$pic_file_name = $tmp_matches[1];
$f = fopen("tmp/".$pic_file_name, "wb"); #
fwrite($f, $pic);
fclose($f);
}
/* End of file ptl_fork.php */
?>
<?php
// 需要抓取的网页地址
$url = 'https://.jb51.';
$content = file_get_contents($url);
preg_match_all('/<imgs+src="(.*?)"/', $content, $matches,PREG_SET_ORDER);
echo "已发现".count($matches)."张图片n";
list($sm, $ss) = explode(" ", microtime());
foreach ($matches as $k => $val)
{
$pid[$k] = ptl_fork();
if(!$pid[$k])
{
download($url, $val);
// 子进程要exit否则会进行递归多进程,父进程不要exit否则终止多进程
exit(0);
}
if ($pid[$k])
{
// ptl_waitpid($pid[$k], $status, WUNTRACED);
}
}
echo "下载完成n";
list($em, $es) = explode(" ", microtime());
echo "用时:",($es+$em) - ($ss + $sm),"n";
/**
* 抓取网页图片
*
*/
function download($url, $val)
{
$pic_url = $val[1];
if (strpos($val[1], '//') !== false)
{
;
}
elseif (preg_match('@^(.*?)/@', $val[1], $inner_matches) == 0)
{
$pic_url = $url.$val[1];
}
elseif (preg_match('@[:.]@', $inner_matches[1], $tmp_matches) == 0)
{
$pic_url = $url.$val[1];
}
$pic = file_get_contents($pic_url);
if ($pic === false)
{
return;
}
preg_match('@/([^/]+)$@', $pic_url, $tmp_matches);
// 可使用assert处理异常
$pic_file_name = $tmp_matches[1];
$f = fopen("tmp/".$pic_file_name, "wb"); #
fwrite($f, $pic);
fclose($f);
}
/* End of file ptl_fork.php */
?>
希望本文所述对大家的PHP程序设计有所帮助。
上一篇:php使用ereg验证文件上传的方法
下一篇:php中最简单的字符串匹配算法
编程语言
- 机械手焊接机器人编程 机械手焊接设备编程
- vb数据库编程实例,vb做数据库
- tiobe世界编程语言排行榜,全球编程语言排行
- 成都java编程培训 成都it编程培训中心
- 编程基础培训,编程基础知识培训
- flash游戏编程基础教程,flash游戏开发教程
- 不会英语能学编程吗 不会英语可以学程序员吗
- 爱心代码编程C语言 爱心代码编程c语言公式
- c语言编程学习入门 c语言编程快速入门
- 西门子plc编程培训 西门子plc编程培训班
- 哪里可以学编程 台州哪里可以学编程
- 少儿编程哪个好 少儿编程哪个品牌好
- 编程是什么意思,图形编程是什么意思
- c语言编程软件下载,c语言编程软件在哪下载
- java编程软件下载,java编程下载手机版
- ug编程培训学校,ug编程培训教程