流式讀寫文件

第一步先要弄清楚為什么需要壓縮和解壓文件，這是因為文件太大了，我們需要將文件進(jìn)行壓縮，既然壓縮了。

后期就需要對其進(jìn)行解壓縮。我們要考慮最壞的打算，文件過于大，電腦內(nèi)存沒辦法一步獲取并且存儲這么大的文件，所以我們需要使用到流式的方法來處理文件。

首先來了解一下如何流式處理文件

知識預(yù)知

fs模塊里有Stream相關(guān)接口：

• createReadStream可以創(chuàng)建讀文件流，
• createWriteStream可以創(chuàng)建寫文件流，

pipe可以在兩個流之間創(chuàng)建一個管道，一部分一部分的將一個文件流里面的數(shù)據(jù)傳輸?shù)搅硪粋€文件流里

例子

舉個例子，來理解一下使用方法

let fs = require('fs');
let readerStream = fs.createReadStream('a.txt');
let writerStream = fs.createWriteStream('b.txt');
readerStream.pipe(writerStream);

這段代碼各位看客可以復(fù)制下來運行一下，看看結(jié)果，當(dāng)然你至少要保證讀文件流里的路徑地址是真實存在的，即同級目錄下，你在創(chuàng)建一個a.txt文件，里面隨便寫上一些內(nèi)容，運行后會在同級目錄下生成一個b.txt文件，這個文件里面的內(nèi)容就是通過文件流和管道方法，從a.txt文件里復(fù)制過來的內(nèi)容。

這段代碼創(chuàng)建了兩個文件流，一個是讀文件流，一個是寫文件流，如何通過pipe方法將兩個文件流相通，從讀文件流中讀數(shù)據(jù)傳入到寫文件流里面，這樣的方式傳輸數(shù)據(jù)不會占用太多空間，因為在這個傳輸過程中，每次只有一小部分的數(shù)據(jù)進(jìn)入占有內(nèi)存。

壓縮解壓文件

知識預(yù)知

node.js里有個原生模塊庫zlib進(jìn)行文件的壓縮解壓處理

• createGzip方法壓縮文件
• createGunzip方法解壓文件

壓縮文件

fs.createReadStream('a.txt')
  .pipe(zlib.createGzip())
  .pipe(fs.createWriteStream('input.txt.gz'));

一行一行的來觀察這個三行代碼，第一行創(chuàng)建了讀文件流，讀取a.txt里面的文件，第二行通過zlib.createGzip()對數(shù)據(jù)進(jìn)行壓縮，第三行通過fs.createWriteStream(‘input.txt.gz’)將文件寫出到input.txt.gz文件里。

這三個部分通過pipe進(jìn)行連接，也就是說處理的不是一個完整的文件，而是一部分一部分的處理文件，也就是通過流式的方式處理文件。

解壓文件

fs.createReadStream('input.txt.gz')
  .pipe(zlib.createGunzip())
  .pipe(fs.createWriteStream('c.txt'));

通過先前的壓縮文件的講解，詳細(xì)各位同學(xué)應(yīng)該也能看得懂解壓文件的各個部分做了什么事情，希望各位同學(xué)自己思考思考。

總結(jié)

以上為個人經(jīng)驗，希望能給大家一個參考，也希望大家多多支持腳本之家。

最新評論