Python 如何手動編寫一個自己的LRU緩存裝飾器的方法實現(xiàn)
LRU緩存算法,指的是近期最少使用算法,大體邏輯就是淘汰最長時間沒有用的那個緩存,這里我們使用有序字典,來實現(xiàn)自己的LRU緩存算法,并將其包裝成一個裝飾器。
1、首先創(chuàng)建一個my_cache.py文件 編寫自己我們自己的LRU緩存算法,代碼如下:
import time from collections import OrderedDict ''' 基于LRU,近期最少用緩存算法寫的裝飾器。 ''' class LRUCacheDict: def __init__(self, max_size=1024, expiration=60): self.max_size = max_size self.expiration = expiration self._cache = {} self._access_records = OrderedDict() # 記錄訪問時間 self._expire_records = OrderedDict() # 記錄失效時間 def __setitem__(self, key, value): # 設(shè)置緩存 now = int(time.time()) self.__delete__(key) # 刪除原有使用該Key的所有緩存 self._cache[key] = value self._access_records = now # 設(shè)置訪問時間 self._expire_records = now + self.expiration # 設(shè)置過期時間 self.cleanup() def __getitem__(self, key): # 更新緩存 now = int(time.time()) del self._access_records[key] # 刪除原有的訪問時按 self._access_records[key] = now self.cleanup() def __contains__(self, key): # 這個是字典默認(rèn)調(diào)用key的方法 self.cleanup() return key in self._cache def __delete__(self, key): if key in self._cache: del self._cache[key] # 刪除緩存 del self._access_records[key] # 刪除訪問時間 del self._expire_records[key] # 刪除過期時間 def cleanup(self): # 用于去掉無效(超過大?。┖瓦^期的緩存 if self._expire_records is None: return None pending_delete_keys = [] now = int(time.time()) for k, v in self._expire_records.items(): # 判斷緩存是否失效 if v < now: pending_delete_keys.append(k) for del_k in pending_delete_keys: self.__delete__(del_k) while len(self._cache) > self.max_size: # 判斷緩存是否超過長度 for k in self._access_records.keys(): # LRU 是在這里實現(xiàn)的,如果緩存用的最少,那么它存入在有序字典中的位置也就最前 self.__delete__(k) break
代碼邏輯其實很簡單,上面的注釋已經(jīng)很詳細(xì)了,不懂的話多看幾次。這里實現(xiàn)LRU邏輯的其實是有序字典OrderedDict,你最先存入的值就會存在字典的最前面。當(dāng)一個值使用時候,我們會重新儲存過期時間,導(dǎo)致被經(jīng)常使用的緩存,會存在字典的后面。而一但緩存的內(nèi)容長度超過限制時候,這里會調(diào)用有序字典最前面的key(也即是近期相對用的最少的),并刪除對應(yīng)的內(nèi)容,以達(dá)到LRU的邏輯。
2、在將我們寫好的算法改成裝飾器:
from functools import wraps from my_cache import LRUCacheDict def lru_cache(max_size=1024, expiration=60, types='LRU'): if types == 'lru' or types == 'LRU': my_cache = LRUCacheDict(max_size=max_size, expiration=expiration) def wrapper(func): @wraps(func) def inner(*args, **kwargs): key = repr(*args, **kwargs) try: result = my_cache[key] except KeyError: result = func(*args, **kwargs) my_cache[key] = result return result return inner return wrapper
這里需要解釋的是直接使用 my_cache[key],這個類似字典的方法,實際上是調(diào)用了 LRUCacheDict 中的 __contations__方法,這也是字典中實現(xiàn)通過key取值的方法。這個裝飾器里,我加入了types的參數(shù),你們可以根據(jù)需求,實現(xiàn)不同的緩存算法,豐富這個裝飾器的功能,而lru緩存本身,其實已經(jīng)是python的標(biāo)準(zhǔn)庫了,可以引入functools.lru_cache來調(diào)用。
到此這篇關(guān)于Python 如何手動編寫一個自己的LRU緩存裝飾器的方法實現(xiàn)的文章就介紹到這了,更多相關(guān)Python LRU緩存裝飾器內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Python學(xué)習(xí)筆記之變量、自定義函數(shù)用法示例
這篇文章主要介紹了Python學(xué)習(xí)筆記之變量、自定義函數(shù)用法,結(jié)合實例形式分析了Python變量、自定義函數(shù)的概念、功能、使用方法及相關(guān)操作注意事項,需要的朋友可以參考下2019-05-05如何通過Python收集MySQL MHA 部署及運行狀態(tài)信息的功能
本篇幅主要介紹如何通過Python實現(xiàn)收集MHA 集群 節(jié)點信息 和 運行狀態(tài)的功能。這些信息將是CMDB信息的重要組成部分,感興趣的朋友一起看看吧2021-10-10python3中sorted函數(shù)里cmp參數(shù)改變詳解
在本篇文章里小編給大家整理的是關(guān)于python3中sorted函數(shù)里關(guān)于cmp這一參數(shù)的改變相關(guān)內(nèi)容,需要的朋友們可以學(xué)習(xí)下。2020-03-03