Node.js中Request模塊處理HTTP協(xié)議請(qǐng)求的基本使用教程
這里來(lái)介紹一個(gè)Node.js的模塊——request。有了這個(gè)模塊,http請(qǐng)求變的超簡(jiǎn)單。
Request使用超簡(jiǎn)單,同時(shí)支持https和重定向。
var request = require('request'); request('http://www.google.com', function (error, response, body) { if (!error && response.statusCode == 200) { console.log(body) // 打印google首頁(yè) } })
流:
任何響應(yīng)都可以輸出到文件流。
request('http://google.com/doodle.png').pipe(fs.createWriteStream('doodle.png'))
反過(guò)來(lái),也可以將文件傳給PUT或POST請(qǐng)求。未提供header的情況下,會(huì)檢測(cè)文件后綴名,在PUT請(qǐng)求中設(shè)置相應(yīng)的content-type。
fs.createReadStream('file.json').pipe(request.put('http://mysite.com/obj.json'))
請(qǐng)求也可以pipe給自己。這種情況下會(huì)保留原content-type和content-length。
request.get('http://google.com/img.png').pipe(request.put('http://mysite.com/img.png'))
表單:
request支持application/x-www-form-urlencoded和multipart/form-data實(shí)現(xiàn)表單上傳。
x-www-form-urlencoded很簡(jiǎn)單:
request.post('http://service.com/upload', {form:{key:'value'}})
或者:
request.post('http://service.com/upload').form({key:'value'})
使用multipart/form-data不用操心設(shè)置header之類的瑣事,request會(huì)幫你解決。
var r = request.post('http://service.com/upload') var form = r.form() form.append('my_field', 'my_value') form.append('my_buffer', new Buffer([1, 2, 3])) form.append('my_file', fs.createReadStream(path.join(__dirname, 'doodle.png')) form.append('remote_file', request('http://google.com/doodle.png'))
HTTP認(rèn)證:
request.get('http://some.server.com/').auth('username', 'password', false);
或
request.get('http://some.server.com/', { 'auth': { 'user': 'username', 'pass': 'password', 'sendImmediately': false } });
sendImmediately,默認(rèn)為真,發(fā)送一個(gè)基本的認(rèn)證header。設(shè)為false之后,收到401會(huì)重試(服務(wù)器的401響應(yīng)必須包含WWW-Authenticate指定認(rèn)證方法)。
sendImmediately為真時(shí)支持Digest認(rèn)證。
OAuth登錄:
// Twitter OAuth var qs = require('querystring') , oauth = { callback: 'http://mysite.com/callback/' , consumer_key: CONSUMER_KEY , consumer_secret: CONSUMER_SECRET } , url = 'https://api.twitter.com/oauth/request_token' ; request.post({url:url, oauth:oauth}, function (e, r, body) { // Ideally, you would take the body in the response // and construct a URL that a user clicks on (like a sign in button). // The verifier is only available in the response after a user has // verified with twitter that they are authorizing your app. var access_token = qs.parse(body) , oauth = { consumer_key: CONSUMER_KEY , consumer_secret: CONSUMER_SECRET , token: access_token.oauth_token , verifier: access_token.oauth_verifier } , url = 'https://api.twitter.com/oauth/access_token' ; request.post({url:url, oauth:oauth}, function (e, r, body) { var perm_token = qs.parse(body) , oauth = { consumer_key: CONSUMER_KEY , consumer_secret: CONSUMER_SECRET , token: perm_token.oauth_token , token_secret: perm_token.oauth_token_secret } , url = 'https://api.twitter.com/1/users/show.json?' , params = { screen_name: perm_token.screen_name , user_id: perm_token.user_id } ; url += qs.stringify(params) request.get({url:url, oauth:oauth, json:true}, function (e, r, user) { console.log(user) }) }) })
定制HTTP header
User-Agent之類可以在options對(duì)象中設(shè)置。在下面的例子中,我們調(diào)用github API找出某倉(cāng)庫(kù)的收藏?cái)?shù)和派生數(shù)。我們使用了定制的User-Agent和https.
var request = require('request'); var options = { url: 'https://api.github.com/repos/mikeal/request', headers: { 'User-Agent': 'request' } }; function callback(error, response, body) { if (!error && response.statusCode == 200) { var info = JSON.parse(body); console.log(info.stargazers_count +"Stars"); console.log(info.forks_count +"Forks"); } } request(options, callback);
cookies:
默認(rèn)情況下,cookies是禁用的。在defaults或options將jar設(shè)為true,使后續(xù)的請(qǐng)求都使用cookie.
var request = request.defaults({jar: true}) request('http://www.google.com', function () { request('http://images.google.com') })
通過(guò)創(chuàng)建request.jar()的新實(shí)例,可以使用定制的cookie,而不是request全局的cookie jar。
var j = request.jar() var request = request.defaults({jar:j}) request('http://www.google.com', function () { request('http://images.google.com') })
或者
var j = request.jar() var cookie = request.cookie('your_cookie_here') j.setCookie(cookie, uri, function (err, cookie){}) request({url: 'http://www.google.com', jar: j}, function () { request('http://images.google.com') })
注意,setCookie至少需要三個(gè)參數(shù),最后一個(gè)是回調(diào)函數(shù)。
可以用request的pipe方法很方便的獲取圖片的文件流
var request = require('request'), fs = require('fs'); request('https://www.google.com.hk/images/srpr/logo3w.png').pipe(fs.createWriteStream('doodle.png'));
更多使用方法和說(shuō)明可點(diǎn)擊這里繼續(xù)閱讀:https://github.com/mikeal/request/
示例
這里寫了一個(gè)很簡(jiǎn)單的示例,用來(lái)抓取去哪兒網(wǎng)的酒店查詢數(shù)據(jù)(獲取酒店某一時(shí)間段內(nèi)各房型的價(jià)格排名):
var request = require('request'), fs = require('fs'); var reqUrl = 'http://hotel.qunar.com/price/detail.jsp?fromDate=2012-08-18&toDate=2012-08-19&cityurl=shanghai_city&HotelSEQ=shanghai_city_2856&cn=5'; request({uri:reqUrl}, function(err, response, body) { //console.log(response.statusCode); //console.log(response); //如果數(shù)據(jù)量比較大,就需要對(duì)返回的數(shù)據(jù)根據(jù)日期、酒店ID進(jìn)行存儲(chǔ),如果獲取數(shù)據(jù)進(jìn)行對(duì)比的時(shí)候直接讀文件 var filePath = __dirname + '/data/data.js'; if (fs.exists(filePath)) { fs.unlinkSync(filePath); console.log('Del file ' + filePath); } fs.writeFile(filePath, body, 'utf8', function(err) { if (err) { throw err; } console.log('Save ' + filePath + ' ok~'); }); console.log('Fetch ' + reqUrl + ' ok~'); });
這個(gè)例子源于一個(gè)做酒店業(yè)務(wù)的朋友,想知道自己在網(wǎng)站上提供給客戶的價(jià)格的競(jìng)爭(zhēng)力:
1、如果提供的價(jià)格過(guò)低,自己賺到的錢就會(huì)少了,所以如果自己價(jià)格是最低了,就需要看第二低是多少,然后決定是否調(diào)整;
2、如果提供的價(jià)格過(guò)高,那么被搜索出來(lái)的排名結(jié)果就比較靠后,沒(méi)什么客戶來(lái)預(yù)訂酒店,業(yè)務(wù)就沒(méi)有了
因?yàn)樽龅木频觐A(yù)訂業(yè)務(wù)很多,比如超過(guò)2千家以上,如果一個(gè)一個(gè)依賴人工去查詢排名就比較被動(dòng),而且很難再做大,所以他的這個(gè)需求我分析了一下是可行的,而且可以做成一個(gè)很好的實(shí)時(shí)預(yù)警系統(tǒng)(當(dāng)然數(shù)據(jù)5~10分鐘會(huì)自動(dòng)在頁(yè)面刷新一次)。這樣才能保障利潤(rùn)最大化,提高銷售、客戶部門的工作效率,加快酒店的合作數(shù)量和公司的人員擴(kuò)張:
1、不虧本,虧本的買賣不做;
2、如果發(fā)現(xiàn)提供的價(jià)格過(guò)低或是過(guò)高,需要支持調(diào)用平臺(tái)的api接口,直接修改價(jià)格;
3、有自動(dòng)生成分析報(bào)表功能,分析競(jìng)爭(zhēng)對(duì)手在價(jià)格調(diào)整策略上的變化情況;
- Node.js使用http模塊實(shí)現(xiàn)后臺(tái)服務(wù)器流程解析
- Node.js?搭建后端服務(wù)器內(nèi)置模塊(?http+url+querystring?的使用)
- Node.js基礎(chǔ)入門之path模塊,url模塊,http模塊使用詳解
- 基于Node.js的http模塊搭建HTTP服務(wù)器
- node.js使用http模塊創(chuàng)建服務(wù)器和客戶端完整示例
- Node.js進(jìn)階之核心模塊https入門
- node.js中http模塊和url模塊的簡(jiǎn)單介紹
- node.js 核心http模塊,起一個(gè)服務(wù)器,返回一個(gè)頁(yè)面的實(shí)例
- Node.js 中 http 模塊的深度剖析與實(shí)戰(zhàn)應(yīng)用小結(jié)
相關(guān)文章
在node.js中怎么屏蔽掉favicon.ico的請(qǐng)求
這篇文章主要介紹了在node.js中怎么屏蔽掉favicon.ico的請(qǐng)求,非常不錯(cuò),具有參考借鑒價(jià)值,需要的朋友可以參考下2017-03-03node登錄生成token并驗(yàn)證的實(shí)現(xiàn)
token校驗(yàn)作為項(xiàng)目里的必要項(xiàng),其重要性不言而喻,本文主要介紹了node登錄生成token并驗(yàn)證的實(shí)現(xiàn),具有一定的參考價(jià)值,感興趣的可以了解一下2024-02-02node.js使用express框架進(jìn)行文件上傳詳解
在本篇內(nèi)容里小編給大家整理了關(guān)于node.js使用express框架進(jìn)行文件上傳的相關(guān)知識(shí)點(diǎn)內(nèi)容,有需要的朋友們跟著學(xué)習(xí)下。2019-03-03node?gyp安裝canvas原生模塊編譯node?pregyp詳解
這篇文章主要為大家介紹了Nodejs關(guān)于原生模塊編譯node-gyp + node-pre-gyp (以安裝canvas為例)示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-11-11windows系統(tǒng)下安裝npm(Node.js)方法教程
在Windows環(huán)境下進(jìn)行Node.js的安裝并不是一件復(fù)雜的事情,但是在安裝過(guò)程中需要注意一些細(xì)節(jié),下面這篇文章主要給大家介紹了關(guān)于windows系統(tǒng)下安裝npm(Node.js)的相關(guān)資料,需要的朋友可以參考下2023-12-12從零開始學(xué)習(xí)Node.js系列教程之基于connect和express框架的多頁(yè)面實(shí)現(xiàn)數(shù)學(xué)運(yùn)算示例
這篇文章主要介紹了Node.js基于connect和express框架的多頁(yè)面實(shí)現(xiàn)數(shù)學(xué)運(yùn)算,簡(jiǎn)單講述了connect和express框架的原理及數(shù)學(xué)運(yùn)算相關(guān)操作技巧,需要的朋友可以參考下2017-04-04