欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

關(guān)于Python內(nèi)存分配時的小秘密分享

 更新時間:2019年09月05日 15:39:50   作者:豌豆花下貓  
這篇文章主要給大家分享介紹了關(guān)于Python內(nèi)存分配時的小秘密,文中通過示例代碼介紹的非常詳細,對大家學習或者使用Python具有一定的參考學習價值,需要的朋友們下面來一起學習學習吧

前言

Python 中的sys 模塊極為基礎(chǔ)而重要,它主要提供了一些給解釋器使用(或由它維護)的變量,以及一些與解釋器強交互的函數(shù)。

本文將會頻繁地使用該模塊的getsizeof() 方法,因此,我先簡要介紹一下:

  • 該方法用于獲取一個對象的字節(jié)大小(bytes)
  • 它只計算直接占用的內(nèi)存,而不計算對象內(nèi)所引用對象的內(nèi)存

這里有個直觀的例子:

import sys

a = [1, 2]
b = [a, a] # 即 [[1, 2], [1, 2]]

# a、b 都只有兩個元素,所以直接占用的大小相等
sys.getsizeof(a) # 結(jié)果:80
sys.getsizeof(b) # 結(jié)果:80

上例說明了一件事:一個靜態(tài)創(chuàng)建的列表,如果只包含兩個元素,那它自身占用的內(nèi)存就是 80 字節(jié),不管其元素所指向的對象是什么。

好了,擁有這把測量工具,我們就來探究一下 Python 的內(nèi)置對象都藏了哪些小秘密吧。

1、空對象不是“空”的!

對于我們熟知的一些空對象,例如空字符串、空列表、空字典等等,不知道大家是否曾好奇過,是否曾思考過這些問題:空的對象是不是不占用內(nèi)存呢?如果占內(nèi)存,那占用多少呢?為什么是這樣分配的呢?

直接上代碼吧,一起來看看幾類基本數(shù)據(jù)結(jié)構(gòu)的空對象的大?。?br />

import sys
sys.getsizeof("")  # 49
sys.getsizeof([])  # 64
sys.getsizeof(())  # 48
sys.getsizeof(set()) # 224
sys.getsizeof(dict()) # 240

# 作為參照:
sys.getsizeof(1)  # 28
sys.getsizeof(True) # 28

可見,雖然都是空對象,但是這些對象在內(nèi)存分配上并不為“空”,而且分配得還挺大(記住這幾個數(shù)字哦,后面會考)。

排一下序:基礎(chǔ)數(shù)字<空元組 < 空字符串 < 空列表 < 空集合 < 空字典。

這個小秘密該怎么解釋呢?

因為這些空對象都是容器,我們可以抽象地理解:它們的一部分內(nèi)存用于創(chuàng)建容器的骨架、記錄容器的信息(如引用計數(shù)、使用量信息等等)、還有一部分內(nèi)存則是預分配的。

2、內(nèi)存擴充不是均勻的!

空對象并不為空,一部分原因是 Python 解釋器為它們預分配了一些初始空間。在不超出初始內(nèi)存的情況下,每次新增元素,就使用已有內(nèi)存,因而避免了再去申請新的內(nèi)存。

那么,如果初始內(nèi)存被分配完之后,新的內(nèi)存是怎么分配的呢?

import sys
letters = "abcdefghijklmnopqrstuvwxyz"

a = []
for i in letters:
 a.append(i)
 print(f'{len(a)}, sys.getsizeof(a) = {sys.getsizeof(a)}')
 
b = set()
for j in letters:
 b.add(j)
 print(f'{len(b)}, sys.getsizeof(b) = {sys.getsizeof(b)}')

c = dict()
for k in letters:
 c[k] = k
 print(f'{len(c)}, sys.getsizeof(c) = {sys.getsizeof(c)}')

分別給三類可變對象添加 26 個元素,看看結(jié)果如何:

由此能看出可變對象在擴充時的秘密:

  • 超額分配機制: 申請新內(nèi)存時并不是按需分配的,而是多分配一些,因此當再添加少量元素時,不需要馬上去申請新內(nèi)存
  • 非均勻分配機制: 三類對象申請新內(nèi)存的頻率是不同的,而同一類對象每次超額分配的內(nèi)存并不是均勻的,而是逐漸擴大的

3、列表不等于列表!

以上的可變對象在擴充時,有相似的分配機制,在動態(tài)擴容時可明顯看出效果。

那么,靜態(tài)創(chuàng)建的對象是否也有這樣的分配機制呢?它跟動態(tài)擴容比,是否有所區(qū)別呢?

先看看集合與字典:

# 靜態(tài)創(chuàng)建對象
set_1 = {1, 2, 3, 4}
set_2 = {1, 2, 3, 4, 5}
dict_1 = {'a':1, 'b':2, 'c':3, 'd':4, 'e':5}
dict_2 = {'a':1, 'b':2, 'c':3, 'd':4, 'e':5, 'f':6}

sys.getsizeof(set_1) # 224
sys.getsizeof(set_2) # 736
sys.getsizeof(dict_1) # 240
sys.getsizeof(dict_2) # 368

看到這個結(jié)果,再對比上一節(jié)的截圖,可以看出:在元素個數(shù)相等時,靜態(tài)創(chuàng)建的集合/字典所占的內(nèi)存跟動態(tài)擴容時完全一樣。

這個結(jié)論是否適用于列表對象呢?一起看看:

list_1 = ['a', 'b']
list_2 = ['a', 'b', 'c']
list_3 = ['a', 'b', 'c', 'd']
list_4 = ['a', 'b', 'c', 'd', 'e']

sys.getsizeof(list_1) # 80
sys.getsizeof(list_2) # 88
sys.getsizeof(list_3) # 96
sys.getsizeof(list_4) # 104

上一節(jié)的截圖顯示,列表在前 4 個元素時都占 96 字節(jié),在 5 個元素時占 128 字節(jié),與這里明顯矛盾。

所以,這個秘密昭然若揭:在元素個數(shù)相等時,靜態(tài)創(chuàng)建的列表所占的內(nèi)存有可能小于動態(tài)擴容時的內(nèi)存!

也就是說,這兩種列表看似相同,實際卻不同!列表不等于列表!

4、消減元素并不會釋放內(nèi)存!

前面提到了,擴充可變對象時,可能會申請新的內(nèi)存。

那么,如果反過來縮減可變對象,減掉一些元素后,新申請的內(nèi)存是否會自動回收掉呢?

import sys
a = [1, 2, 3, 4]
sys.getsizeof(a) # 初始值:96
a.append(5)  # 擴充后:[1, 2, 3, 4, 5]
sys.getsizeof(a) # 擴充后:128
a.pop()   # 縮減后:[1, 2, 3, 4]
sys.getsizeof(a) # 縮減后:128

如代碼所示,列表在一擴一縮后,雖然回到了原樣,但是所占用的內(nèi)存空間可沒有自動釋放啊。其它的可變對象同理。

這就是 Python 的小秘密了,“胖子無法減重原理” :瘦子變胖容易,縮減身型也容易,但是體重減不掉,哈哈~~~

5、空字典不等于空字典!

使用 pop() 方法,只會縮減可變對象中的元素,但并不會釋放已申請的內(nèi)存空間。

還有個 clear() 方法,它會清空可變對象的所有元素,讓我們試試看吧:

import sys
a = [1, 2, 3]
b = {1, 2, 3}
c = {'a':1, 'b':2, 'c':3}

sys.getsizeof(a) # 88
sys.getsizeof(b) # 224
sys.getsizeof(c) # 240

a.clear()  # 清空后:[]
b.clear()  # 清空后:set()
c.clear()  # 清空后:{},也即 dict()

調(diào)用 clear() 方法,我們就獲得了幾個空對象。

在第一小節(jié)里,它們的內(nèi)存大小已經(jīng)被查驗過了。(前面說過會考的,請默寫 回看下)

但是,如果這時再去查驗的話,你會驚訝地發(fā)現(xiàn),這些空對象的大小跟前面查的并不完全一樣!

# 承接前面的清空操作:
sys.getsizeof(a) # 64
sys.getsizeof(b) # 224
sys.getsizeof(c) # 72

空列表與空元組的大小不變,然而空字典(72)竟然比前面的空字典(240)要小很多!

也就是說,列表與元組在清空元素后,回到起點不變初心,然而,字典這家伙卻是“賠了夫人又折兵”,不僅把“吃”進去的全吐出來了,還把自己的老本給虧掉了!

字典的這個秘密藏得挺深的,說實話我也是剛剛獲知,百思不得其解……

以上就是 Python 在分配內(nèi)存時的幾個小秘密啦,看完之后,你是否覺得漲見識了呢?

你想明白了幾個呢,又產(chǎn)生了多少新的謎團呢?歡迎留言一起交流哦~

對于那些沒有充分解釋的小秘密,今后我們再慢慢揭秘……

總結(jié)

以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對腳本之家的支持。

相關(guān)文章

  • pygame時序模塊time的具體使用

    pygame時序模塊time的具體使用

    Pygame Time模塊能夠幫助你更好地控制幀率和時間,從而增強游戲的可玩性,本文主要介紹了pygame時序模塊time的具體使用,具有一定的參考價值,感興趣的可以了解一下
    2023-12-12
  • PyTorch梯度下降反向傳播

    PyTorch梯度下降反向傳播

    這篇文章主要介紹了PyTorch反向傳播,反向傳播的目的是計算成本函數(shù)C對網(wǎng)絡(luò)中任意w或b的偏導數(shù),下文更多詳細內(nèi)容敘述需要的小伙伴可以參考一下
    2022-03-03
  • Python 一句話生成字母表的方法

    Python 一句話生成字母表的方法

    今天小編就為大家分享一篇Python 一句話生成字母表的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2019-01-01
  • 深入探索Python解碼神器Chardet自動檢測文本編碼

    深入探索Python解碼神器Chardet自動檢測文本編碼

    Chardet,洞察編碼的清晰水晶球,一個讓你與編碼不再“失聯(lián)”的神器,本文帶大家走近這個隱藏在Python工具箱中的小寶貝,探索它的秘密
    2024-01-01
  • 使用python在校內(nèi)發(fā)人人網(wǎng)狀態(tài)(人人網(wǎng)看狀態(tài))

    使用python在校內(nèi)發(fā)人人網(wǎng)狀態(tài)(人人網(wǎng)看狀態(tài))

    人人網(wǎng)怎么發(fā)狀態(tài)?下面使用python實現(xiàn)這個功能,大家參考使用吧
    2014-02-02
  • 一文教你利用Python租到最合適的房子

    一文教你利用Python租到最合適的房子

    這篇文章主要為大家詳細介紹了如何利用Python語言在爬取到房源數(shù)據(jù)后,挑選出符合自己要求的房子呢?感興趣的小伙伴可以跟隨小編一起學習一下
    2022-09-09
  • Python Socket實現(xiàn)簡單TCP Server/client功能示例

    Python Socket實現(xiàn)簡單TCP Server/client功能示例

    這篇文章主要介紹了Python Socket實現(xiàn)簡單TCP Server/client功能,結(jié)合實例形式分析了Python基于socket創(chuàng)建TCP服務(wù)器Server與客戶端client相關(guān)實現(xiàn)步驟與操作技巧,需要的朋友可以參考下
    2017-08-08
  • python中yield函數(shù)的用法詳解

    python中yield函數(shù)的用法詳解

    這篇文章主要為大家詳細介紹了python中yield函數(shù)的用法,數(shù)據(jù)庫,文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下
    2022-02-02
  • Pycharm遠程連接服務(wù)器并實現(xiàn)代碼同步上傳更新功能

    Pycharm遠程連接服務(wù)器并實現(xiàn)代碼同步上傳更新功能

    這篇文章主要介紹了Pycharm遠程連接服務(wù)器并實現(xiàn)代碼同步上傳更新功能,通過配置遠程連接pycharm,直接在windows下pycharm里修改再保存就可以實現(xiàn)同步更新到服務(wù)器里的代碼里了,需要的朋友可以參考下
    2020-02-02
  • Python+random模塊實現(xiàn)隨機抽樣

    Python+random模塊實現(xiàn)隨機抽樣

    python的random庫,提供了很多隨機抽樣方法。本文將通過幾個示例為大家詳細講講random模塊實現(xiàn)隨機抽樣的方法,需要的可以參考一下
    2022-09-09

最新評論