SQLite中的WAL機制詳細介紹
一、什么是WAL?
WAL的全稱是Write Ahead Logging,它是很多數(shù)據(jù)庫中用于實現(xiàn)原子事務的一種機制,SQLite在3.7.0版本引入了該特性。
二、WAL如何工作?
在引入WAL機制之前,SQLite使用rollback journal機制實現(xiàn)原子事務。
rollback journal機制的原理是:在修改數(shù)據(jù)庫文件中的數(shù)據(jù)之前,先將修改所在分頁中的數(shù)據(jù)備份在另外一個地方,然后才將修改寫入到數(shù)據(jù)庫文件中;如果事務失敗,則將備份數(shù)據(jù)拷貝回來,撤銷修改;如果事務成功,則刪除備份數(shù)據(jù),提交修改。
WAL機制的原理是:修改并不直接寫入到數(shù)據(jù)庫文件中,而是寫入到另外一個稱為WAL的文件中;如果事務失敗,WAL中的記錄會被忽略,撤銷修改;如果事務成功,它將在隨后的某個時間被寫回到數(shù)據(jù)庫文件中,提交修改。
同步WAL文件和數(shù)據(jù)庫文件的行為被稱為checkpoint(檢查點),它由SQLite自動執(zhí)行,默認是在WAL文件積累到1000頁修改的時候;當然,在適當?shù)臅r候,也可以手動執(zhí)行checkpoint,SQLite提供了相關的接口。執(zhí)行checkpoint之后,WAL文件會被清空。
在讀的時候,SQLite將在WAL文件中搜索,找到最后一個寫入點,記住它,并忽略在此之后的寫入點(這保證了讀寫和讀讀可以并行執(zhí)行);隨后,它確定所要讀的數(shù)據(jù)所在頁是否在WAL文件中,如果在,則讀WAL文件中的數(shù)據(jù),如果不在,則直接讀數(shù)據(jù)庫文件中的數(shù)據(jù)。
在寫的時候,SQLite將之寫入到WAL文件中即可,但是必須保證獨占寫入,因此寫寫之間不能并行執(zhí)行。
WAL在實現(xiàn)的過程中,使用了共享內(nèi)存技術,因此,所有的讀寫進程必須在同一個機器上,否則,無法保證數(shù)據(jù)一致性。
三、WAL的優(yōu)點與缺點
優(yōu)點:
1.讀和寫可以完全地并發(fā)執(zhí)行,不會互相阻塞(但是寫之間仍然不能并發(fā))。
2.WAL在大多數(shù)情況下,擁有更好的性能(因為無需每次寫入時都要寫兩個文件)。
3.磁盤I/O行為更容易被預測。
缺點:
1.訪問數(shù)據(jù)庫的所有程序必須在同一主機上,且支持共享內(nèi)存技術。
2.每個數(shù)據(jù)庫現(xiàn)在對應3個文件:<yourdb>.db,<yourdb>-wal,<yourdb>-shm。
3.當寫入數(shù)據(jù)達到GB級的時候,數(shù)據(jù)庫性能將下降。
4.3.7.0之前的SQLite無法識別啟用了WAL機制的數(shù)據(jù)庫文件。
四、WAL引入的兼容性問題
在啟用了WAL之后,數(shù)據(jù)庫文件格式的版本號由1升級到了2,因此,3.7.0之前的SQLite無法識別啟用了WAL機制的數(shù)據(jù)庫文件。
禁用WAL會使數(shù)據(jù)庫文件格式的版本號恢復到1,從而可以被SQLite 3.7.0之前的版本識別。
五、WAL引入的性能問題
在一般情況下,WAL會提高SQLite的事務性能;但是在某些極端情況下,卻會導致SQLite事務性能的下降。
1.在事務執(zhí)行時間較長或者要修改的數(shù)據(jù)量達到GB級的時候,WAL文件會被占用,它會暫時阻止checkpoint的執(zhí)行(checkpoint會清空WAL文件),這將導致WAL文件變得很大,增加尋址時間,最終導致讀寫性能的下降。
2.當checkpoint執(zhí)行的時候,會降低當時的讀寫性能,因此,WAL可能會導致周期性的性能下降。
六、與WAL相關的PRAGMA和接口
PRAGMA journal_mode
PRAGMA wal_checkpoint
PRAGMA wal_autocheckpoint
sqlite3_wal_checkpoint
sqlite3_wal_autocheckpoint
sqlite3_wal_hook
相關文章
System.Data.SQLite 數(shù)據(jù)庫詳細介紹
System.Data.SQLite是SQLite的加強版,它可以無需.NET Framework支持,由于它內(nèi)部包含了一個ADO.NET 2.0引擎,所以.NET開發(fā)人員可以利用System.Data.SQLite方便地開發(fā).NET程序。2011-02-02基于sqlite特殊字符轉(zhuǎn)義的實現(xiàn)方法
本篇文章是對sqlite特殊字符轉(zhuǎn)義的實現(xiàn)方法進行了詳細的分析介紹,需要的朋友參考下2013-05-05SQLite 入門教程二 SQLite的創(chuàng)建、修改、刪除表
今天這一篇只涉及到表的相關內(nèi)容,視圖、觸發(fā)器等到后面再講2013-12-12Sqlite數(shù)據(jù)庫里插入數(shù)據(jù)的條數(shù)上限是500
sqlite每次只能插入的數(shù)據(jù)不能超過500條數(shù)據(jù),大家在使用的時候需要注意一下。2015-04-04SQLite數(shù)據(jù)庫管理系統(tǒng)-我所認識的數(shù)據(jù)庫引擎
SQLite是一款輕量級的、被設計用于嵌入式系統(tǒng)的關聯(lián)式數(shù)據(jù)庫管理系統(tǒng),SQLite 是一個實現(xiàn)自我依賴、純客戶端、零配置且支持事務的數(shù)據(jù)庫引擎2013-01-01