php的curl攜帶header請(qǐng)求頭信息實(shí)現(xiàn)http訪問的方法
導(dǎo)讀:
curl請(qǐng)求時(shí)添加請(qǐng)求頭信息可以模擬真人操作,不容易被當(dāng)成是爬蟲機(jī)器人(采集),從而可以繞過Incapsula等安全驗(yàn)證機(jī)制。
1、首先使用瀏覽器(示例使用的是火狐瀏覽器)訪問接口網(wǎng)址,使用F12調(diào)試,查看請(qǐng)求頭信息,如下:

2、實(shí)現(xiàn)代碼:
<?php
/**
* 開始訪問請(qǐng)求
* @param $url
* @return bool|string
*/
function fetch_url($url) {
$header = FormatHeader($url);
$useragent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:83.0) Gecko/20100101 Firefox/83.0';
$timeout= 120;
$ch = curl_init($url);
curl_setopt($ch, CURLOPT_FAILONERROR, true);
//設(shè)置請(qǐng)求頭信息
curl_setopt($ch, CURLOPT_HTTPHEADER, $header);
//不取得返回頭信息
curl_setopt($ch, CURLOPT_HEADER, 0);
// 關(guān)閉https驗(yàn)證
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, false);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true );
curl_setopt($ch, CURLOPT_ENCODING, "" );
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true );
curl_setopt($ch, CURLOPT_AUTOREFERER, true );
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout );
curl_setopt($ch, CURLOPT_TIMEOUT, $timeout );
curl_setopt($ch, CURLOPT_MAXREDIRS, 10 );
curl_setopt($ch, CURLOPT_USERAGENT, $useragent);
$content = curl_exec($ch);
if(curl_errno($ch))
{
echo 'Error:' . curl_error($ch);
}
else
{
return $content;
}
curl_close($ch);
}
//添加請(qǐng)求頭
function FormatHeader($url)
{
// 解析url
$temp = parse_url($url);
$query = isset($temp['query']) ? $temp['query'] : '';
$path = isset($temp['path']) ? $temp['path'] : '/';
$header = array (
"POST {$path}?{$query} HTTP/1.1",
"Host: {$temp['host']}",
"Referer: http://{$temp['host']}/",
"Content-Type: text/xml; charset=utf-8",
'Accept: application/json, text/javascript, */*; q=0.01',
'Accept-Encoding:gzip, deflate, br',
'Accept-Language:zh-CN,zh;q=0.8,zh-TW;q=0.7,zh-HK;q=0.5,en-US;q=0.3,en;q=0.2',
'Connection:keep-alive',
'User-Agent: Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:83.0) Gecko/20100101 Firefox/83.0',
'X-Requested-With: XMLHttpRequest',
);
return $header;
}
?>
3、調(diào)用示例:
<?php //lcg_value() 返回范圍為 (0, 1) 的一個(gè)偽隨機(jī)數(shù) $url="http://www.xxx.com/getdata.php?v=".lcg_value(); //訪問網(wǎng)址 $html = fetch_url($url);
到此這篇關(guān)于php的curl攜帶header請(qǐng)求頭信息實(shí)現(xiàn)http訪問的方法的文章就介紹到這了,更多相關(guān)php的curl請(qǐng)求頭信息實(shí)現(xiàn)http訪問內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
ThinkPHP實(shí)現(xiàn)非標(biāo)準(zhǔn)名稱數(shù)據(jù)表快速創(chuàng)建模型的方法
這篇文章主要介紹了ThinkPHP實(shí)現(xiàn)非標(biāo)準(zhǔn)名稱數(shù)據(jù)表快速創(chuàng)建模型的方法,對(duì)于采用ThinkPHP操作非標(biāo)準(zhǔn)名稱數(shù)據(jù)表的情況非常實(shí)用,具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2014-11-11
CentOS 6.3下安裝PHP xcache擴(kuò)展模塊筆記
這篇文章主要介紹了CentOS 6.3下安裝PHP xcache擴(kuò)展模塊筆記,本文包含xchache的編譯安裝、配置、測(cè)試等內(nèi)容,需要的朋友可以參考下2014-09-09
laravel 解決paginate查詢多個(gè)字段報(bào)錯(cuò)的問題
今天小編就為大家分享一篇laravel 解決paginate查詢多個(gè)字段報(bào)錯(cuò)的問題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2019-10-10
ThinkPHP模板判斷輸出Present標(biāo)簽用法詳解
這篇文章主要介紹了ThinkPHP模板判斷輸出Present標(biāo)簽用法,可用于判斷模板變量是否已經(jīng)賦值,需要的朋友可以參考下2014-06-06
thinkPHP5框架實(shí)現(xiàn)基于ajax的分頁功能示例
這篇文章主要介紹了thinkPHP5框架實(shí)現(xiàn)基于ajax的分頁功能,結(jié)合實(shí)例形式分析了thinkPHP5框架上進(jìn)行ajax分頁操作的具體步驟、實(shí)現(xiàn)代碼與相關(guān)操作方法,需要的朋友可以參考下2018-06-06
PHP中比較兩個(gè)字符串找出第一個(gè)不同字符位置例子
這是一個(gè)在stackoverflow上的問題。 給出兩個(gè)長(zhǎng)度相等的字符串,找出這兩個(gè)字符串中第一個(gè)不同的字符位置。2014-04-04
PHP網(wǎng)站自動(dòng)化配置的實(shí)現(xiàn)方法(必看)
下面小編就為大家?guī)硪黄狿HP網(wǎng)站自動(dòng)化配置的實(shí)現(xiàn)方法(必看)。小編覺得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2017-05-05

