從Python的源碼來(lái)解析Python下的freeblock
1 引言
在python內(nèi)存管理中,有一個(gè)block的概念。它比較類似于SGI次級(jí)空間配置器。
首先申請(qǐng)一塊大的空間(4KB),然后把它切割成一小份(8, 16 一直到512)。
當(dāng)有內(nèi)存申請(qǐng)的請(qǐng)求時(shí)候,簡(jiǎn)單的流程是:根據(jù)大小找到對(duì)應(yīng)的block,然后在freeblock 上給它一份。
2 問(wèn)題
整個(gè)過(guò)程是一種比較自然的slab分配方式。但當(dāng)我讀到這段代碼時(shí),卻感到疑惑:
static void* _PyObject_Malloc(void* ctx, size_t nbytes) { ... pool->freeblock = (block*)pool + pool->nextoffset; pool->nextoffset += INDEX2SIZE(size); *(block **)(pool->freeblock) = NULL; // [1] ... }
freeblock指向空閑的鏈表,為它賦值很好理解。但是為什么要加上代碼1處那一句!
對(duì)C比較熟悉的童鞋很容易能看出它的作用,它在為*freeblock賦值為NULL。
但是為什么要這么做?
直到看到內(nèi)存回收的代碼:
static void _PyObject_Free(void* ctx, void*p) { ... *(block**)p = lastfree = pool->freeblock; pool->freeblock = (block*)p; ... }
回想一下SGI次級(jí)空間配置,它需要一個(gè)鏈表,指向block中可用的小塊。因?yàn)檫@些快,是離散的,只有用指針才能索引它。
在SGI次級(jí)空間配置中,是用一個(gè)union,達(dá)到了節(jié)省空間的目的:有數(shù)據(jù)時(shí),它存儲(chǔ)著真正的數(shù)據(jù);沒(méi)有數(shù)據(jù)時(shí),它就變成指向下一塊可用內(nèi)存的指針:
union __Obj { union __Obj* free_list_link; char client_data[]; };
這樣一想,問(wèn)題就變得很明顯了。freeblock指向一個(gè)鏈表,鏈表的next域就由它自己來(lái)索引。
在_PyObject_Free中,內(nèi)存p是要被回收的,它應(yīng)該插在freeblock的鏈表頭,freeblock被更新指向它。同時(shí),p指向原來(lái)freeblock指向的內(nèi)容,這是一個(gè)很簡(jiǎn)單的鏈表插入操作。
這樣在遍歷的時(shí)候,我們就可以用freeblock = * freeblock的方式來(lái)工作了。
如下圖所示:
相關(guān)文章
解決pyecharts運(yùn)行后產(chǎn)生的html文件用瀏覽器打開(kāi)空白
這篇文章主要介紹了解決pyecharts運(yùn)行后產(chǎn)生的html文件用瀏覽器打開(kāi)空白,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-03-03計(jì)算pytorch標(biāo)準(zhǔn)化(Normalize)所需要數(shù)據(jù)集的均值和方差實(shí)例
今天小編就為大家分享一篇計(jì)算pytorch標(biāo)準(zhǔn)化(Normalize)所需要數(shù)據(jù)集的均值和方差實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-01-01Python實(shí)現(xiàn)給文件添加內(nèi)容及得到文件信息的方法
這篇文章主要介紹了Python實(shí)現(xiàn)給文件添加內(nèi)容及得到文件信息的方法,可實(shí)現(xiàn)從文件開(kāi)頭添加內(nèi)容的功能,需要的朋友可以參考下2015-05-05基于Python的一個(gè)自動(dòng)錄入表格的小程序
這篇文章主要介紹了基于Python的一個(gè)自動(dòng)錄入表格的小程序,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-08-08Python3.4編程實(shí)現(xiàn)簡(jiǎn)單抓取爬蟲(chóng)功能示例
這篇文章主要介紹了Python3.4編程實(shí)現(xiàn)簡(jiǎn)單抓取爬蟲(chóng)功能,涉及Python3.4網(wǎng)頁(yè)抓取及正則解析相關(guān)操作技巧,需要的朋友可以參考下2017-09-09基于python的opencv圖像處理實(shí)現(xiàn)對(duì)斑馬線的檢測(cè)示例
這篇文章主要介紹了基于python的opencv圖像處理實(shí)現(xiàn)對(duì)斑馬線的檢測(cè)示例,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-11-11