溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

怎么在PHP中利用curl_multi_select解決curl_multi網(wǎng)頁假死問題

發(fā)布時間:2021-06-07 16:19:54 來源:億速云 閱讀:134 作者:Leah 欄目:開發(fā)技術(shù)

這篇文章給大家介紹怎么在PHP中利用curl_multi_select解決curl_multi網(wǎng)頁假死問題,內(nèi)容非常詳細(xì),感興趣的小伙伴們可以參考借鑒,希望對大家能有所幫助。

實例代碼:

$connomains = array(
"//www.jb51.net/",
"http://www.163.com/",
"http://www.sina.com.cn/"
);
$mh = curl_multi_init();
foreach ($connomains as $i => $url) {
   $conn[$i]=curl_init($url);
   curl_setopt($conn[$i],CURLOPT_RETURNTRANSFER,1);
   curl_multi_add_handle ($mh,$conn[$i]);
}
do { $n=curl_multi_exec($mh,$active); } while ($active);
foreach ($connomains as $i => $url) {
   $res[$i]=curl_multi_getcontent($conn[$i]);
   curl_close($conn[$i]);
}
print_r($res);

這個實例代碼有個致命弱點,就是在do循環(huán)的那段,在整個url請求期間是個死循環(huán),它會輕易導(dǎo)致CPU占用很高,網(wǎng)頁出現(xiàn)假死狀態(tài)。

經(jīng)過測試發(fā)現(xiàn),我們可以巧妙使用curl_multi_select()函數(shù)來解決這個問題。

方法如下:

do { $n=curl_multi_exec($mh,$active); } while ($active);

改為

do {
   $mrc = curl_multi_exec($mh,$active);
} while ($mrc == CURLM_CALL_MULTI_PERFORM);
while ($active and $mrc == CURLM_OK) {
    if (curl_multi_select($mh) != -1) {
      do {
          $mrc = curl_multi_exec($mh, $active);
      } while ($mrc == CURLM_CALL_MULTI_PERFORM);
    }
}

因為$active要等全部url數(shù)據(jù)接受完畢才變成false,所以這里用到了curl_multi_exec的返回值判斷是否還有數(shù)據(jù),當(dāng)有數(shù)據(jù)的時候就不停調(diào)用curl_multi_exec,暫時沒有數(shù)據(jù)就進入select階段,新數(shù)據(jù)一來就可以被喚醒繼續(xù)執(zhí)行。這里的好處就是CPU的無謂消耗沒有了。

另外可能遇到的問題:

控制每一個請求的超時時間,在curl_multi_add_handle之前通過curl_setopt去做:

curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);

判斷是否超時了或者其他錯誤,在curl_multi_getcontent之前用:

curl_error($conn[$i]);

了解multi接口

當(dāng)程序需要進行多次curl并發(fā)請求的時候,curl提供的multi接口就派上用場了。流暢大致是這樣的:

1)、curl_multi _init初始化一個multi curl對象,為了同時進行多個curl的并發(fā)訪問,我們需要初始化多個easy curl對象,使用curl_easy_setopt進行相關(guān)設(shè)置。

2)、調(diào)用curl_multi _add_handle把easy curl對象添加到multi curl對象中。

3)、添加完畢后執(zhí)行curl_multi_perform方法進行并發(fā)的訪問。

4)、訪問結(jié)束后curl_multi_remove_handle移除相關(guān)easy curl對象,curl_easy_cleanup清除easy curl對象。

5)、最后curl_multi_cleanup清除multi curl對象。

一個簡單明了的PHP使用curl_multi_add_handle并行處理實例

<?php
// 創(chuàng)建一對cURL資源
$ch2 = curl_init();
$ch3 = curl_init();
// 設(shè)置URL和相應(yīng)的選項
curl_setopt($ch2, CURLOPT_URL, "//www.jb51.net/");
curl_setopt($ch2, CURLOPT_HEADER, 0);
curl_setopt($ch3, CURLOPT_URL, "http://www.baidu.com/");
curl_setopt($ch3, CURLOPT_HEADER, 0);
// 創(chuàng)建批處理cURL句柄
$mh = curl_multi_init();
// 增加2個句柄
curl_multi_add_handle($mh,$ch2);
curl_multi_add_handle($mh,$ch3);
$running=null;
// 執(zhí)行批處理句柄
do {
  curl_multi_exec($mh,$running);
} while($running > 0);
// 關(guān)閉全部句柄
curl_multi_remove_handle($mh, $ch2);
curl_multi_remove_handle($mh, $ch3);
curl_multi_close($mh);
?>

關(guān)于怎么在PHP中利用curl_multi_select解決curl_multi網(wǎng)頁假死問題就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,可以學(xué)到更多知識。如果覺得文章不錯,可以把它分享出去讓更多的人看到。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI