理解nodejs的stream和pipe機制的原理和實現(xiàn)

更新時間：2017年08月12日 09:42:47 作者：Vieri_32

本篇文章主要介紹了理解nodejs的stream和pipe機制的原理和實現(xiàn)，具有一定的參考價值，感興趣的小伙伴們可以參考一下

前言

前幾天別人請教我關于pipe的問題，我發(fā)現(xiàn)我雖然用了nodejs很久，但是由于每次用的不多所以經?；乇躶tream的使用，導致一直不熟，現(xiàn)在重新學習整理一下相關知識。

通過nodeschool學習stream

nodeschool有一個stream-adventure教程教導stream的使用，很簡單

簡單stream進行pipe

首先，我們可以通過管道將輸入定位到輸出，輸入輸出可以是控制臺或者文件流或者http請求，比如

process.stdin.pipe(process.stdout)
process.stdin.pipe(fs.createWriteStream(path))
fs.createReadStream(path).pipe(process.stdin)

pipe中間進行處理

如果我們想要在管道中間進行處理，比如想將輸入的字符串變成大寫寫到輸出里，我們可以使用一些可以作為中間處理的框架，比如through2就很方便

var through2 = require('through2');
var stream = through2(write,end)
process.stdin
  .pipe(stream)
  .pipe(process.stdout);

function write(line,_,next){
  this.push(line.toString().toUpperCase())
  next();
})
function end(done){
  done();
})

stream轉化成普通回調

當我們輸入是流，而輸出是個普通函數，我們需要把輸入流轉化為普通的buffer，這時可以試用concat-stream庫

var concat = require('concat-stream');

var reverseStream=concat(function(text){
  console.log(text.toString().split("").reverse().join(""));
})

process.stdin.pipe(reverseStream)

http server中的流

類似stdin和fs，http由于其特性也適合使用流，所以其自帶類似特性

var http = require('http');
var server = http.createServer(function(req,res){
  req.pipe(res);
})

既作為輸入也作為輸出的流

request框架實現(xiàn)了如下功能，將一個流pipe到request請求中，然后將流的內容發(fā)給服務器，然后返回作為流供其他代碼使用，實現(xiàn)如下

var request = require('request');
var r = request.post('http://localhost:8099');
process.stdin.pipe(r).pipe(process.stdout)

分支管道

下邊是一個例子，這個例子將輸入管道中html包含loud class的元素放入另一個管道進行大寫操作，然后最后合并成輸出

var trumpet = require('trumpet');
var through2 = require('through2');
var fs = require('fs');
var tr = trumpet();
var stream = tr.select('.loud').createStream();
var upper = through2(function(buf,_,next){
  this.push(buf.toString().toUpperCase());
  next();
})
stream.pipe(upper).pipe(stream);
process.stdin.pipe(tr).pipe(process.stdout);

合并輸入輸出stream例子

合并后的輸入輸出可像前文request一樣使用，下邊這個例子實現(xiàn)了使用流的方式進行子進程調用

var spawn = require('child_process').spawn;
var duplexer2 = require('duplexer2');

module.exports = function(cmd, args){
  var c = spawn(cmd,args)
  return duplexer2(c.stdin,c.stdout)
}

總結

通過上邊的例子，可以知道stream應該還有如何合并等更復雜的應用方式。總之整體上符合如下特性：