node.js文件的壓縮解壓問題
流式讀寫文件
第一步先要弄清楚為什么需要壓縮和解壓文件,這是因?yàn)槲募罅?,我們需要將文件進(jìn)行壓縮,既然壓縮了。
后期就需要對其進(jìn)行解壓縮。我們要考慮最壞的打算,文件過于大,電腦內(nèi)存沒辦法一步獲取并且存儲(chǔ)這么大的文件,所以我們需要使用到流式的方法來處理文件。
首先來了解一下如何流式處理文件
知識預(yù)知
fs模塊里有Stream相關(guān)接口:
- createReadStream可以創(chuàng)建讀文件流,
- createWriteStream可以創(chuàng)建寫文件流,
pipe可以在兩個(gè)流之間創(chuàng)建一個(gè)管道,一部分一部分的將一個(gè)文件流里面的數(shù)據(jù)傳輸?shù)搅硪粋€(gè)文件流里
例子
舉個(gè)例子,來理解一下使用方法
let fs = require('fs'); let readerStream = fs.createReadStream('a.txt'); let writerStream = fs.createWriteStream('b.txt'); readerStream.pipe(writerStream);
這段代碼各位看客可以復(fù)制下來運(yùn)行一下,看看結(jié)果,當(dāng)然你至少要保證讀文件流里的路徑地址是真實(shí)存在的,即同級目錄下,你在創(chuàng)建一個(gè)a.txt文件,里面隨便寫上一些內(nèi)容,運(yùn)行后會(huì)在同級目錄下生成一個(gè)b.txt文件,這個(gè)文件里面的內(nèi)容就是通過文件流和管道方法,從a.txt文件里復(fù)制過來的內(nèi)容。
這段代碼創(chuàng)建了兩個(gè)文件流,一個(gè)是讀文件流,一個(gè)是寫文件流,如何通過pipe方法將兩個(gè)文件流相通,從讀文件流中讀數(shù)據(jù)傳入到寫文件流里面,這樣的方式傳輸數(shù)據(jù)不會(huì)占用太多空間,因?yàn)樵谶@個(gè)傳輸過程中,每次只有一小部分的數(shù)據(jù)進(jìn)入占有內(nèi)存。
壓縮解壓文件
知識預(yù)知
node.js里有個(gè)原生模塊庫zlib進(jìn)行文件的壓縮解壓處理
- createGzip方法壓縮文件
- createGunzip方法解壓文件
壓縮文件
fs.createReadStream('a.txt') .pipe(zlib.createGzip()) .pipe(fs.createWriteStream('input.txt.gz'));
一行一行的來觀察這個(gè)三行代碼,第一行創(chuàng)建了讀文件流,讀取a.txt里面的文件,第二行通過zlib.createGzip()對數(shù)據(jù)進(jìn)行壓縮,第三行通過fs.createWriteStream(‘input.txt.gz’)將文件寫出到input.txt.gz文件里。
這三個(gè)部分通過pipe進(jìn)行連接,也就是說處理的不是一個(gè)完整的文件,而是一部分一部分的處理文件,也就是通過流式的方式處理文件。
解壓文件
fs.createReadStream('input.txt.gz') .pipe(zlib.createGunzip()) .pipe(fs.createWriteStream('c.txt'));
通過先前的壓縮文件的講解,詳細(xì)各位同學(xué)應(yīng)該也能看得懂解壓文件的各個(gè)部分做了什么事情,希望各位同學(xué)自己思考思考。
總結(jié)
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
如何在node.js中使用?JsonWebToken模塊進(jìn)行token加密
目前在web框架中最流行的身份驗(yàn)證是使用jsonwebtoken,簡稱jwt.可以設(shè)置加密方式,過期時(shí)間,存放個(gè)人信息,逆解析,下面這篇文章主要給大家介紹了關(guān)于如何在node.js中使用?JsonWebToken模塊進(jìn)行token加密的相關(guān)資料,需要的朋友可以參考下2023-03-03nodejs入門教程二:創(chuàng)建一個(gè)簡單應(yīng)用示例
這篇文章主要介紹了nodejs入門教程之創(chuàng)建一個(gè)簡單應(yīng)用的方法,涉及nodejs http模塊的引用、端口監(jiān)聽等相關(guān)操作技巧,需要的朋友可以參考下2017-04-04nodejs與瀏覽器中全局對象區(qū)別點(diǎn)總結(jié)
在本篇文章里小編給大家整理的是一篇關(guān)于nodejs與瀏覽器中全局對象區(qū)別點(diǎn)總結(jié)內(nèi)容,對此有需要的朋友們可以學(xué)習(xí)下。2021-12-12nodejs異步編程基礎(chǔ)之回調(diào)函數(shù)用法分析
這篇文章主要介紹了nodejs異步編程基礎(chǔ)之回調(diào)函數(shù)用法,結(jié)合具體實(shí)例形式分析了阻塞與非阻塞形式下回調(diào)函數(shù)具體功能、使用技巧,需要的朋友可以參考下2018-12-12