欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

PHP CURL獲取cookies模擬登錄的方法

 更新時(shí)間：2013年11月04日 15:41:16   作者：  
利用PHP的curl函數(shù)實(shí)現(xiàn)模擬登錄的方法。
要提取google搜索的部分?jǐn)?shù)據(jù)，發(fā)現(xiàn)google對(duì)于軟件抓取它的數(shù)據(jù)屏蔽的厲害，以前偽造下 USER-AGENT 就可以抓數(shù)據(jù)，但是現(xiàn)在卻不行了。利用抓包數(shù)據(jù)發(fā)現(xiàn)，Google 判斷了 cookies，當(dāng)你沒有cookies的時(shí)候，直接返回 302 跳轉(zhuǎn)，而且是連續(xù)幾十個(gè)302跳轉(zhuǎn)，根本抓不了數(shù)據(jù)。
因此，在發(fā)送搜索命令時(shí)，需要先提取 cookies 并保存，然后利用保存下來的這個(gè)cookies再次發(fā)送搜索命令即可正常抓數(shù)據(jù)了。這其實(shí)和論壇的模擬登錄一個(gè)道理，先POST登錄，獲取cookies并保存，然后利用這個(gè)cookies訪問就可以了。
PHP 代碼如下：
復(fù)制代碼 代碼如下:

<?php
header('Content-Type: text/html; charset=utf-8');

$cookie_file = dirname(__FILE__).'/cookie.txt';
//$cookie_file = tempnam("tmp","cookie");

//先獲取cookies并保存
$url = "http://www.google.com.hk";
$ch = curl_init($url); //初始化
curl_setopt($ch, CURLOPT_HEADER, 0); //不返回header部分
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); //返回字符串，而非直接輸出
curl_setopt($ch, CURLOPT_COOKIEJAR,  $cookie_file); //存儲(chǔ)cookies
curl_exec($ch);
curl_close($ch);

//使用上面保存的cookies再次訪問
$url = "http://www.google.com.hk/search?oe=utf8&ie=utf8&source=uds&hl=zh-CN&q=qq";
$ch = curl_init($url);
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file); //使用上面獲取的cookies
$response = curl_exec($ch);
curl_close($ch);

echo $response;
?>

相關(guān)文章

最新評(píng)論