node中Stream流的詳細(xì)介紹
一、是什么
流(Stream),是一個(gè)數(shù)據(jù)傳輸手段,是端到端信息交換的一種方式,而且是有順序的,是逐塊讀取數(shù)據(jù)、處理內(nèi)容,用于順序讀取輸入或?qū)懭胼敵?/p>
Node.js
中很多對(duì)象都實(shí)現(xiàn)了流,總之它是會(huì)冒數(shù)據(jù)(以 Buffer
為單位)
它的獨(dú)特之處在于,它不像傳統(tǒng)的程序那樣一次將一個(gè)文件讀入內(nèi)存,而是逐塊讀取數(shù)據(jù)、處理其內(nèi)容,而不是將其全部保存在內(nèi)存中
流可以分成三部分:
source
dest
pipe
在source
和dest
之間有一個(gè)連接的管道pipe
,它的基本語法是source.pipe(dest)
,source
和dest
就是通過pipe連接,讓數(shù)據(jù)從source
流向了dest
,如下圖所示:
二、種類
在NodeJS
,幾乎所有的地方都使用到了流的概念,分成四個(gè)種類:
- 可寫流:可寫入數(shù)據(jù)的流。例如 fs.createWriteStream() 可以使用流將數(shù)據(jù)寫入文件
- 可讀流: 可讀取數(shù)據(jù)的流。例如fs.createReadStream() 可以從文件讀取內(nèi)容
- 雙工流: 既可讀又可寫的流。例如 net.Socket
- 轉(zhuǎn)換流: 可以在數(shù)據(jù)寫入和讀取時(shí)修改或轉(zhuǎn)換數(shù)據(jù)的流。例如,在文件壓縮操作中,可以向文件寫入壓縮數(shù)據(jù),并從文件中讀取解壓數(shù)據(jù)
在NodeJS
中HTTP
服務(wù)器模塊中,request
是可讀流,response
是可寫流。還有fs
模塊,能同時(shí)處理可讀和可寫文件流
可讀流和可寫流都是單向的,比較容易理解,而另外兩個(gè)是雙向的
雙工流
之前了解過websocket
通信,是一個(gè)全雙工通信,發(fā)送方和接受方都是各自獨(dú)立的方法,發(fā)送和接收都沒有任何關(guān)系
如下圖所示:
基本代碼如下:
const { Duplex } = require('stream'); const myDuplex = new Duplex({ read(size) { // ... }, write(chunk, encoding, callback) { // ... } });
雙工流
雙工流的演示圖如下所示:
除了上述壓縮包的例子,還比如一個(gè) babel
,把es6
轉(zhuǎn)換為,我們?cè)谧筮厡懭?nbsp;es6
,從右邊讀取 es5
基本代碼如下所示:
const { Transform } = require('stream'); const myTransform = new Transform({ transform(chunk, encoding, callback) { // ... } });
三、應(yīng)用場(chǎng)景
stream
的應(yīng)用場(chǎng)景主要就是處理IO
操作,而http
請(qǐng)求和文件操作都屬于IO
操作
試想一下,如果一次IO
操作過大,硬件的開銷就過大,而將此次大的IO
操作進(jìn)行分段操作,讓數(shù)據(jù)像水管一樣流動(dòng),直到流動(dòng)完成
常見的場(chǎng)景有:
- get請(qǐng)求返回文件給客戶端
- 文件操作
- 一些打包工具的底層操作
get請(qǐng)求返回文件給客戶端
使用stream
流返回文件,res
也是一個(gè)stream
對(duì)象,通過pipe
管道將文件數(shù)據(jù)返回
const server = http.createServer(function (req, res) { const method = req.method; // 獲取請(qǐng)求方法 if (method === 'GET') { // get 請(qǐng)求 const fileName = path.resolve(__dirname, 'data.txt'); let stream = fs.createReadStream(fileName); stream.pipe(res); // 將 res 作為 stream 的 dest } }); server.listen(8000);
文件操作
創(chuàng)建一個(gè)可讀數(shù)據(jù)流readStream
,一個(gè)可寫數(shù)據(jù)流writeStream
,通過pipe
管道把數(shù)據(jù)流轉(zhuǎn)過去
const fs = require('fs') const path = require('path') // 兩個(gè)文件名 const fileName1 = path.resolve(__dirname, 'data.txt') const fileName2 = path.resolve(__dirname, 'data-bak.txt') // 讀取文件的 stream 對(duì)象 const readStream = fs.createReadStream(fileName1) // 寫入文件的 stream 對(duì)象 const writeStream = fs.createWriteStream(fileName2) // 通過 pipe執(zhí)行拷貝,數(shù)據(jù)流轉(zhuǎn) readStream.pipe(writeStream) // 數(shù)據(jù)讀取完成監(jiān)聽,即拷貝完成 readStream.on('end', function () { console.log('拷貝完成') })
一些打包工具的底層操作
目前一些比較火的前端打包構(gòu)建工具,都是通過node.js
編寫的,打包和構(gòu)建的過程肯定是文件頻繁操作的過程,離不來stream
,如gulp
到此這篇關(guān)于node中Stream流的詳細(xì)介紹的文章就介紹到這了,更多相關(guān)node Stream內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
node.js+Ajax實(shí)現(xiàn)獲取HTTP服務(wù)器返回?cái)?shù)據(jù)
這篇文章主要介紹了node.js+Ajax實(shí)現(xiàn)獲取HTTP服務(wù)器返回?cái)?shù)據(jù),講解的十分詳細(xì),也給出了很多的實(shí)例,是篇非常不錯(cuò)的文章,這里推薦給大家。2014-11-11詳解node.js創(chuàng)建一個(gè)web服務(wù)器(Server)的詳細(xì)步驟
這篇文章主要介紹了詳解node.js創(chuàng)建一個(gè)web服務(wù)器(Server)的詳細(xì)步驟,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-01-01express中創(chuàng)建 websocket 接口及問題解答
本文主要介紹了express中創(chuàng)建 websocket 接口及問題解答,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-05-05nodejs控制臺(tái)打印高亮代碼的實(shí)現(xiàn)方法
這篇文章主要給大家介紹了關(guān)于nodejs控制臺(tái)打印高亮代碼的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-05-05Node.js使用Streams來處理文件讀寫操作的示例代碼
在Node.js中,Streams 提供了一種高效的方式來處理文件的讀寫操作,特別是對(duì)于大文件或數(shù)據(jù)流,Streams 允許你以流的方式讀寫數(shù)據(jù),這意味著數(shù)據(jù)可以分塊處理,本文介紹了在Node.js中如何使用Streams來處理文件讀寫操作,需要的朋友可以參考下2024-09-09淺析node應(yīng)用的timing-attack安全漏洞
本篇文章給大家通過原理的原因分析了node應(yīng)用的timing-attack安全漏洞問題,有興趣的朋友閱讀參考下。2018-02-02