LZ77壓縮算法原理的理解

數(shù)據(jù)壓縮是一個減小數(shù)據(jù)存儲空間的過程，目前被應(yīng)用在軟件工程的各個地方，了解其一些原理，方便我們更好的甄選壓縮方案。

壓縮方案有很多種，常見的就是有損和無損壓縮。霍夫曼編碼和LZ77(Lempel-Ziv-1977)都是無損壓縮，其中霍夫曼是采用最小冗余編碼的算法進(jìn)行壓縮，而LZ77是采用字典的方式進(jìn)行壓縮。關(guān)于霍夫曼編碼的算法，網(wǎng)上有很多對其詳細(xì)的講解，我們本篇幅不在細(xì)說，主要圖解一下LZ77壓縮算法的方式，看看其有哪些優(yōu)缺點(diǎn)。

 信息熵

數(shù)據(jù)為何是可以壓縮的，因?yàn)閿?shù)據(jù)都會表現(xiàn)出一定的特性，稱為熵。絕大多數(shù)的數(shù)據(jù)所表現(xiàn)出來的容量往往大于其熵所建議的最佳容量。比如所有的數(shù)據(jù)都會有一定的冗余性，我們可以把冗余的數(shù)據(jù)采用更少的位對頻繁出現(xiàn)的字符進(jìn)行標(biāo)記，也可以基于數(shù)據(jù)的一些特性基于字典編碼，代替重復(fù)多余的短語。

  LZ77算法原理

LZ77壓縮算法采用字典的方式進(jìn)行壓縮，是一個簡單但十分高效的數(shù)據(jù)壓縮算法。其方式就是把數(shù)據(jù)中一些可以組織成短語(最長字符)的字符加入字典，然后再有相同字符出現(xiàn)采用標(biāo)記來代替字典中的短語，如此通過標(biāo)記代替多數(shù)重復(fù)出現(xiàn)的方式以進(jìn)行壓縮。要理解這種算法，我們先了解3個關(guān)鍵詞:短語字典，滑動窗口和向前緩沖區(qū)。

關(guān)鍵詞：

1.前向緩沖區(qū)

每次讀取數(shù)據(jù)的時候，先把一部分?jǐn)?shù)據(jù)預(yù)載入前向緩沖區(qū)。為移入滑動窗口做準(zhǔn)備

2.滑動窗口

一旦數(shù)據(jù)通過緩沖區(qū)，那么它將移動到滑動窗口中，并變成字典的一部分。

3.短語字典

從字符序列S1...Sn，組成n個短語。比如字符(A,B,D) ,可以組合的短語為{(A),(A,B),(A,B,D),(B),(B,D),(D)},如果這些字符在滑動窗口里面，就可以記為當(dāng)前的短語字典，因?yàn)榛瑒哟翱诓粩嗟南蚯盎瑒?，所以短語字典也是不斷的變化。

LZ77的主要算法邏輯就是，先通過前向緩沖區(qū)預(yù)讀數(shù)據(jù)，然后再向滑動窗口移入（滑動窗口有一定的長度），不斷的尋找能與字典中短語匹配的最長短語，然后通過標(biāo)記符標(biāo)記。我們還以字符ABD為例子，看如下圖:

目前從前向緩沖區(qū)中可以和滑動窗口中可以匹配的最長短語就是（A,B）,然后向前移動的時候再次遇到（A,B）的時候采用標(biāo)記符代替。

壓縮

當(dāng)壓縮數(shù)據(jù)的時候，前向緩沖區(qū)與移動窗口之間在做短語匹配的是后會存在2種情況:

• 找不到匹配時：將未匹配的符號編碼成符號標(biāo)記（多數(shù)都是字符本身）
• 找到匹配時:將其最長的匹配編碼成短語標(biāo)記。
• 短語標(biāo)記包含三部分信息:（滑動窗口中的偏移量（從匹配開始的地方計(jì)算）、匹配中的符號個數(shù)、匹配結(jié)束后的前向緩沖區(qū)中的第一個符號）。

 一旦把n個符號編碼并生成響應(yīng)的標(biāo)記，就將這n個符號從滑動窗口的一端移出，并用前向緩沖區(qū)中同樣數(shù)量的符號來代替它們，如此，滑動窗口中始終有最新的短語。

我們采用圖例來看:

 1、開始

2、滑動窗口中沒有數(shù)據(jù)，所以沒有匹配到短語，將字符A標(biāo)記為A

3、滑動窗口中有A,沒有從緩沖區(qū)中字符（BABC）中匹配到短語，依然把B標(biāo)記為B

4、緩沖區(qū)字符（ABCB）在滑動窗口的位移6位置找到AB,成功匹配到短語AB,將AB編碼為(6,2,C)

5、緩沖區(qū)字符（BABA）在滑動窗口位移4的位置匹配到短語BAB,將BAB編碼為(4,3,A)

6、緩沖區(qū)字符（BCAD）在滑動窗口位移2的位置匹配到短語BC，將BC編碼為（2,2,A）

7、緩沖區(qū)字符D,在滑動窗口中沒有找到匹配短語，標(biāo)記為D

8、緩沖區(qū)中沒有數(shù)據(jù)進(jìn)入了，結(jié)束

 解壓

解壓類似于壓縮的逆向過程，通過解碼標(biāo)記和保持滑動窗口中的符號來更新解壓數(shù)據(jù)。

當(dāng)解碼字符標(biāo)記:將標(biāo)記編碼成字符拷貝到滑動窗口中

解碼短語標(biāo)記:在滑動窗口中查找響應(yīng)偏移量，同時找到指定長短的短語進(jìn)行替換。

我們還是采用圖例來看下:

1、開始

2、符號標(biāo)記A解碼

3、符號標(biāo)記B解碼

4、短語標(biāo)記(6,2,C)解碼

5、短語標(biāo)記(4,3,A)解碼

6、短語標(biāo)記(2,2,A)解碼

7、符號標(biāo)記D解碼

 優(yōu)缺點(diǎn)

大多數(shù)情況下LZ77壓縮算法的壓縮比相當(dāng)高，當(dāng)然了也和你選擇滑動窗口大小，以及前向緩沖區(qū)大小，以及數(shù)據(jù)熵有關(guān)系。其壓縮過程是比較耗時的，因?yàn)橐ㄙM(fèi)很多時間尋找滑動窗口中的短語匹配，不過解壓過程會很快，因?yàn)槊總€標(biāo)記都明確告知在哪個位置可以讀取了。

以上就是LZ77壓縮算法原理的理解，如有疑問請留言或者到本站社區(qū)交流討論，感謝閱讀，希望能幫助到大家，謝謝大家對本站的支持！

最新評論