色尼玛亚洲综合影院,亚洲3atv精品一区二区三区,麻豆freexxxx性91精品,欧美在线91

PHP curl實現抓取302跳轉后頁面的示例

php的CURL正常抓取頁面程序如下:

$url = 'http://www.baidu.com';$ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_VERBOSE, true); curl_setopt($ch, CURLOPT_HEADER, true);curl_setopt($ch, CURLOPT_NOBODY, true);curl_setopt($ch, CURLOPT_CUSTOMREQUEST, 'GET');curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); curl_setopt($ch, CURLOPT_TIMEOUT, 20); curl_setopt($ch, CURLOPT_AUTOREFERER, true); curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true); $ret = curl_exec($ch); $info = curl_getinfo($ch); curl_close($ch);


如果你抓取到的是302狀態,是因為再抓取的過程中,有的跳轉需要給下一個鏈接傳遞參數,而下一個鏈接同時也設置了如果沒接收到相應的參數是為非法訪問。

curl_setopt($curl, CURLOPT_CUSTOMREQUEST, 'GET');

顯示就應該正常了。

上面用來抓取功能,幾乎應該沒問題的。你可以查一下CURLOPT_CUSTOMREQUEST相關資料。

使用一個自定義的請求信息來代替”GET”或”HEAD”作為HTTP請求。這對于執行”DELETE” 或者其他更隱蔽的HTTP請求。有效值如”GET”,”POST”,”CONNECT”等等。也就是說,不要在這里輸入整個HTTP請求。例如輸入”GET /index.html HTTP/1.0/r/n/r/n”是不正確的。

php技術PHP curl實現抓取302跳轉后頁面的示例,轉載需保留來源!

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播更多信息之目的,如作者信息標記有誤,請第一時間聯系我們修改或刪除,多謝。

主站蜘蛛池模板: 宜丰县| 安新县| 萍乡市| 乐安县| 章丘市| 平塘县| 延安市| 棋牌| 岫岩| 蓝山县| 昆明市| 安远县| 华宁县| 五指山市| 奉贤区| 舒兰市| 红桥区| 长岭县| 舟曲县| 罗定市| 麻阳| 元谋县| 博客| 盘山县| 波密县| 芜湖市| 修武县| 长沙市| 海城市| 平遥县| 常德市| 全椒县| 永康市| 漳州市| 香港| 安康市| 涟水县| 牟定县| 东至县| 阿克苏市| 四子王旗|