1. 程式人生 > >curl批處理實現,多請求併發

curl批處理實現,多請求併發

在面試過程中遇到一個問題,加入一個一個網站訪問一次需要兩秒,我們如何實現在2秒左右請求三次?

面試官想問的就是如何使用curl併發處理請求

關於curl_multi_init()

一般來說,想到要用curl_multi_init()時,目的是要同時請求多個url,而不是一個一個依次請求,否則就要curl_init()了。

不過,在使用curl_multi的時候,你可能遇到cpu消耗過高、網頁假死等現象,可以看看如何解決curl_multi導致網頁假死的問題

使用curl_multi的步驟總結如下:

第一步:呼叫curl_multi_init
第二步:迴圈呼叫curl_multi_add_handle
這一步需要注意的是,curl_multi_add_handle的第二個引數是由curl_init而來的子handle。
第三步:持續呼叫curl_multi_exec
第四步:根據需要迴圈呼叫curl_multi_getcontent獲取結果
第五步:呼叫curl_multi_remove_handle,併為每個字handle呼叫curl_close
第六步:呼叫curl_multi_close

各函式作用解釋:

curl_multi_init()
初始化一個curl批處理控制代碼資源。

curl_multi_add_handle()
向curl批處理會話中新增單獨的curl控制代碼資源。curl_multi_add_handle()函式有兩個引數,第一個引數表示一個curl批處理控制代碼資源,第二個引數表示一個單獨的curl控制代碼資源。

curl_multi_exec()
解析一個curl批處理控制代碼,curl_multi_exec()函式有兩個引數,第一個引數表示一個批處理控制代碼資源,第二個引數是一個引用值的引數,表示剩餘需要處理的單個的curl控制代碼資源數量。

curl_multi_remove_handle()


移除curl批處理控制代碼資源中的某個控制代碼資源,curl_multi_remove_handle()函式有兩個引數,第一個引數表示一個curl批處理控制代碼資源,第二個引數表示一個單獨的curl控制代碼資源。

curl_multi_close()
關閉一個批處理控制代碼資源。

curl_multi_getcontent()
在設定了CURLOPT_RETURNTRANSFER的情況下,返回獲取的輸出的文字流。

curl_multi_info_read()
獲取當前解析的curl的相關傳輸資訊。

示例程式碼:

<?php
// 建立一對cURL資源
$ch1 = curl_init();
$ch2 = curl_init();

// 設定URL和相應的選項
curl_setopt($ch1, CURLOPT_URL, "http://www.example.com/");
curl_setopt($ch1, CURLOPT_HEADER, 0);
curl_setopt($ch2, CURLOPT_URL, "http://www.php.net/");
curl_setopt($ch2, CURLOPT_HEADER, 0);

// 建立批處理cURL控制代碼
$mh = curl_multi_init();

// 增加2個控制代碼
curl_multi_add_handle($mh,$ch1);
curl_multi_add_handle($mh,$ch2);

$running=null;
// 執行批處理控制代碼
do {
    usleep(10000);
    curl_multi_exec($mh,$running);
} while ($running > 0);

// 關閉全部控制代碼
curl_multi_remove_handle($mh, $ch1);
curl_multi_remove_handle($mh, $ch2);
curl_multi_close($mh);

?>

獲取批處理後的結果:

string curl_multi_getcontent ( resource $ch )