浅谈PHP模拟发送POST请求之curl基本使⽤
⽬录
cURL的基本使⽤步骤
cURL的常⽤设置
设置基本信息：
设置POST数据信息：
设置验证信息：
设置强化信息：
cURL批处理功能的基本使⽤
cURL批处理时内存占⽤过多的问题
cURL批处理时的内存优化⽅案
cURL批处理的内存优化结果
cURL的基本使⽤步骤
⾸先来介绍cURL:
cURL按照HTTP头信息来模拟浏览器传输数据，它⽀持FTP,FTPS,HTTP,HTTPS,DICT,FILE等协议，拥有HTTPS认证，HTTPPOST⽅法，HTTPPUT⽅法，FTP上传，HTTP上传，代理服务器，cookies，⽤户名/密码认证等功能。cURL可谓是实现爬站抓取⽹页、POST数据等功能的利器。
使⽤cURL函数主要分为四部分：
1.初始化cURL。
2.设置cURL变量，这是cRUL的核⼼，扩展功能全靠这⼀步骤。
3.执⾏cURL，获取结果。
4.关闭连接，回收资源。
$ch = curl_init();//1
curl_setopt($ch, CURLOPT_URL, "localhost");//2
$output = curl_exec($ch);//3
curl_close($ch);//4
另外，我们还可以使⽤curl_getinfo($ch)函数获取curl执⾏的信息，其结果为⼀个数组
$info数组的内容包括如下等内容：
“url”//资源⽹络地址
“content_type”//内容编码
“http_code”//HTTP状态码
“filetime”//⽂件创建时间
“total_time”//总耗时
“size_upload”//上传数据的⼤⼩
“size_download”//下载数据的⼤⼩
“speed_download”//下载速度
“speed_upload”//上传速度
“download_content_length”//下载内容的长度
“upload_content_length”//上传内容的长度
cURL的常⽤设置
下⾯详细介绍curl使⽤第⼆步时常⽤的变量设置，在使⽤curl函数时，可以按各种需求来设置。
设置基本信息：
php支持多线程吗curl_setopt($ch,CURLOPT_URL,$string);//设置curl的⽬录地址
curl_setopt($ch,CURLOPT_PORT,$port);//设置连接端⼝，⼀般不设置默认80
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);//返回结果流，并不是输出它留待后续处理，⼀般会设置这⼀项，稍后处理抓取到的信息，⽽不是直接输出出来。
设置POST数据信息：
curl_setopt($ch,CURLOPT_POST,1);//设置传送数据⽅式为POST
curl_setopt($ch,CURLOPT_POSTFIELDS,$string);//设置要传输的数据
设置验证信息：
curl_setopt($ch,CURLOPT_COOKIE,$string);//设置curl执⾏时所携带的Cookie信息
curl_setopt($ch,CURLOPT_USERAGENT,$string);//设置curl模拟的浏览器信息
curl_setopt($ch,CURLOPT_REFERER,$string);//设置header中的referer，有利于破解防盗链
curl_setopt($ch,CURLOPT_USERPWD,$string);//传递⼀个连接中需要的⽤户名和密码，格式为："[username]:[password]"
curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1);//设置允许服务器重定向
设置强化信息：
curl_setopt($ch,CURLOPT_NOBODY,1);//设置不允许输出HTMLbody体，如果在抓取页⾯标题等信息时设置此选项会⼤⼤加快速度
curl_setopt($ch,CURLOPT_TIMEOUT,$int);//设置允许执⾏的最长秒数（超时时间），设置数值⼩的时候，CURL会放弃执⾏时间长的页⾯
curl_setopt($ch,CURLOPT_HEADER,1);//设置允许将读取⽬标时产⽣的header头⽂件包含在输出流中
cURL批处理功能的基本使⽤
当然cURL的功能并不⽌于此，在⼿册上你可以到它更多的变量设置。⽽且cURL最强⼤的地⽅在其批处理功能。
cURL的批处理似乎也很好理解，以下是⼀般步骤：
1.$mh=curl_multi_init();//初始化⼀个批处理句柄。
2.curl_multi_add_handle($mh,$ch);//往批处理句柄中添加设置好的$ch句柄。
3.curl_multi_exec($mh,$running);//执⾏$mh句柄，并将$mh句柄的运⾏状态写⼊$running变量中
4.当$running为true时循环执⾏curl_multi_close()函数
5.循环结束后遍历$mh句柄，⽤curl_multi_getcontent()获取第⼀个句柄的返回值
6.⽤curl_multi_remove_handle()将$mh中的句柄移除
7.⽤curl_multi_close()关闭$mh批处理句柄。
代码如下：
<?php
$chArr=[];
for($i=0;$i<50;$i++){
  $chArr[$i]=curl_init("www.baidu");
　curl_setopt($chArr[$i],CURLOPT_RETURNTRANSFER,1);
}
$mh = curl_multi_init(); //1
foreach($chArr as $k => $ch){
  curl_multi_add_handle($mh,$ch); //2
    }
$running = null;
do{
  curl_multi_exec($mh,$running); //3
}while($running > 0); //4
foreach($chArr as $k => $ch){
$result[$k]= curl_multi_getcontent($ch); //5
curl_multi_remove_handle($mh,$ch);//6
}
curl_multi_close($mh); //7
>
cURL批处理时内存占⽤过多的问题
但是，执⾏⼤批量的句柄时我们会发现⼀个很严重的问题，那就是执⾏时系统CPU占⽤率⼏乎100%，⼏乎是死机状态了。纠其原因，那是因为在$running>0，执⾏curl_multi_exec($mh,$running)⽽整个
批处理句柄没有全部执⾏完毕时，系统会不停地执⾏curl_multi_exec()函数。我们⽤实验来证明：
我们在循环中curl_multi_exec($mh,$running)句前加⼊⼀个echo"a"；的语句。我们的⽬的是执⾏50次对百度的访问，然后来看⼀下结果。
从图中滚动条的⼤⼩(滚动条已经最⼩状态了)可以⼤概看出输出a的个数，500个也不⽌，所以我们便可以到占⽤CPU的罪魁祸⾸了。
cURL批处理时的内存优化⽅案
进⾏改动的⽅式是应⽤curl函数库中的curl_multi_select()函数，其函数原型如下：
intcurl_multi_select(resource$mh[,float$timeout=1.0])
阻塞直到cURL批处理连接中有活动连接。成功时返回描述符集合中描述符的数量。失败时，select失败时返回-1，否则返回超时(从底层的select系统调⽤)。
我⽤们curl_multi_select()函数来达到没有需要读取的程序就阻塞住的⽬的。
我们对批处理的第3、4步进⾏优化，利⽤其多线程，模拟并发程序。
很多朋友会对⼿册中提供的代码⼼存疑惑（我⼀开始也是），下⾯的代码及解释。
$running = null;
do {
$mrc = curl_multi_exec($mh, $running);
} while ($mrc == CURLM_CALL_MULTI_PERFORM);
/
/本次循环第⼀次处理$mh批处理中的$ch句柄，并将$mh批处理的执⾏状态写⼊$running，当状态值等于CURLM_CALL_MULTI_PERFORM时，表明数据还在写⼊或读取中，执⾏循环，当第⼀次$ch句柄的数据写⼊或读取成功后，状态值变为CURLM_OK，跳出本次//$running为true，即$mh批处理之中还有$ch句柄正待处理，$mrc==CURLM_OK，即上⼀次$ch句柄的读取或写⼊已经执⾏完毕。
while ($running && $mrc == CURLM_OK) {
if (curl_multi_select($mh) != -1) {//$mh批处理中还有可执⾏的$ch句柄，curl_multi_select($mh) != -1程序退出阻塞状态。
do {                            //继续执⾏需要处理的$ch句柄。
　$mrc = curl_multi_exec($mh, $running);
} while ($mrc == CURLM_CALL_MULTI_PERFORM);
}
}
这样执⾏的好处是$mh批处理中的$ch句柄会在读取或写⼊数据结束后($mrc==CURLM_OK)，进⼊curl_multi_select($mh)的阻塞阶段，⽽不会在整个$mh批处理执⾏时不停地执⾏curl_multi_exec,⽩⽩浪费
CPU资源。
cURL批处理的内存优化结果
完整代码如下：
<?php
$chArr=[];
for($i=0;$i<50;$i++){
$chArr[$i]=curl_init("www.baidu");
curl_setopt($chArr[$i],CURLOPT_RETURNTRANSFER,1);
}
$mh = curl_multi_init();
foreach($chArr as $k => $ch)
curl_multi_add_handle($mh,$ch);
$running = null;
do {
        $mrc = curl_multi_exec($mh, $running);
    　} while ($mrc == CURLM_CALL_MULTI_PERFORM);
    while ($running && $mrc == CURLM_OK) {
    　if (curl_multi_select($mh) != -1) {
      do {
      $mrc = curl_multi_exec($mh, $running);
    　} while ($mrc == CURLM_CALL_MULTI_PERFORM);
    　}
    }
foreach($chArr as $k => $ch){
$result[$k]= curl_multi_getcontent($ch);
curl_multi_remove_handle($mh,$ch);
}
curl_multi_close($mh);
>
我们再次在$mrc=curl_multi_exec($mh,$running)句⼦前加⼊echo"a"；结果如下图：
虽然也不⽌50次，但是⽐之未优化前，CPU使⽤率已经⼤为改观。
虽然curl函数⾮常强⼤，但是我们还是有使⽤其他函数来发送POST请求的机会，另外也能从更底层了解curl函数，所以本辑也⽤⼤很⼤篇幅在其他函数上。以上就是浅谈PHP模拟发送POST请求之curl基本使⽤的详细内容，更多关于PHP模拟发送POST请求之curl基本使⽤的资料请关注其它相关⽂章！

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。