curl批處理實現,多請求併發
在面試過程中遇到一個問題,加入一個一個網站訪問一次需要兩秒,我們如何實現在2秒左右請求三次?
面試官想問的就是如何使用curl併發處理請求
關於curl_multi_init()
一般來說,想到要用curl_multi_init()時,目的是要同時請求多個url,而不是一個一個依次請求,否則就要curl_init()了。
不過,在使用curl_multi的時候,你可能遇到cpu消耗過高、網頁假死等現象,可以看看如何解決curl_multi導致網頁假死的問題
使用curl_multi的步驟總結如下:
第一步:呼叫curl_multi_init
第二步:迴圈呼叫curl_multi_add_handle
這一步需要注意的是,curl_multi_add_handle的第二個引數是由curl_init而來的子handle。
第三步:持續呼叫curl_multi_exec
第四步:根據需要迴圈呼叫curl_multi_getcontent獲取結果
第五步:呼叫curl_multi_remove_handle,併為每個字handle呼叫curl_close
第六步:呼叫curl_multi_close
各函式作用解釋:
curl_multi_init()
初始化一個curl批處理控制代碼資源。
curl_multi_add_handle()
向curl批處理會話中新增單獨的curl控制代碼資源。curl_multi_add_handle()函式有兩個引數,第一個引數表示一個curl批處理控制代碼資源,第二個引數表示一個單獨的curl控制代碼資源。
curl_multi_exec()
解析一個curl批處理控制代碼,curl_multi_exec()函式有兩個引數,第一個引數表示一個批處理控制代碼資源,第二個引數是一個引用值的引數,表示剩餘需要處理的單個的curl控制代碼資源數量。
curl_multi_remove_handle()
移除curl批處理控制代碼資源中的某個控制代碼資源,curl_multi_remove_handle()函式有兩個引數,第一個引數表示一個curl批處理控制代碼資源,第二個引數表示一個單獨的curl控制代碼資源。
curl_multi_close()
關閉一個批處理控制代碼資源。
curl_multi_getcontent()
在設定了CURLOPT_RETURNTRANSFER的情況下,返回獲取的輸出的文字流。
curl_multi_info_read()
獲取當前解析的curl的相關傳輸資訊。
示例程式碼:
<?php // 建立一對cURL資源 $ch1 = curl_init(); $ch2 = curl_init(); // 設定URL和相應的選項 curl_setopt($ch1, CURLOPT_URL, "http://www.example.com/"); curl_setopt($ch1, CURLOPT_HEADER, 0); curl_setopt($ch2, CURLOPT_URL, "http://www.php.net/"); curl_setopt($ch2, CURLOPT_HEADER, 0); // 建立批處理cURL控制代碼 $mh = curl_multi_init(); // 增加2個控制代碼 curl_multi_add_handle($mh,$ch1); curl_multi_add_handle($mh,$ch2); $running=null; // 執行批處理控制代碼 do { usleep(10000); curl_multi_exec($mh,$running); } while ($running > 0); // 關閉全部控制代碼 curl_multi_remove_handle($mh, $ch1); curl_multi_remove_handle($mh, $ch2); curl_multi_close($mh); ?>
獲取批處理後的結果:
string curl_multi_getcontent ( resource $ch
)