Python 內(nèi)存管理機制全面分析
概述
在Python中,內(nèi)存管理涉及到一個包含所有Python對象和數(shù)據(jù)結(jié)構(gòu)的私有堆(heap). 這個私有堆的管理由內(nèi)部的Python內(nèi)存管理器保證。Python內(nèi)存管理器有不同的組件來處理各種動態(tài)存儲管理方面的問題,如共享,分割,預(yù)分配或緩存。
在最底層,一個原始內(nèi)存分配器通過與操作系統(tǒng)的內(nèi)存管理器交互,確保私有堆有足夠的空間來存儲所有與Python相關(guān)的數(shù)據(jù)。在原始內(nèi)存分配器的基礎(chǔ)上,幾個對象特定的分配器在同一個堆上運行,并根據(jù)每種對象類型的特點實現(xiàn)不同的內(nèi)存管理策略。例如,整數(shù)對象在堆內(nèi)的管理方式不同于字符串,元祖,或者字典。因為整數(shù)需要不同的存儲需求和速度與空間的權(quán)衡。因此,Python內(nèi)存管理器將一些工作分配給對象特定分配器,但確保后者在私有堆的范圍內(nèi)運行。
Python堆內(nèi)存的管理由解釋器來執(zhí)行,用戶對他沒有控制權(quán),即使他們經(jīng)常操作只想堆內(nèi)存塊的對象指針,理解這一點非常重要。Python對象和其他內(nèi)部緩沖區(qū)的堆空間分配是由Python內(nèi)存管理器按需通過本文檔中列出的Python/C API函數(shù)進行的。
內(nèi)存管理機制Python的內(nèi)存管理總共分為4層(Layer0-3)
第一層Layer1的僅僅是對malloc的簡單包裝, raw memory,目的是為了兼容各個操作系統(tǒng),因為不同的操作系統(tǒng)調(diào)用malloc的時候可能會有不同的行為結(jié)果;第二層Layer2是內(nèi)存管理機制的核心,其中g(shù)c就是在這一層發(fā)揮至關(guān)重要的作用。第三層,是對象緩沖池,如Python對一些對象的直接操作,包括int,list等
對于可能被經(jīng)常使用,而且是immutable的對象,如bool類型,元祖類型,小的整數(shù),長度較短的字符串等,Python會緩存在layer3,直接供Python調(diào)用,避免頻繁的創(chuàng)建和銷毀。’
當(dāng)一個對象邏輯上不被使用了,但并沒有被釋放,那么就存在內(nèi)存泄漏,很可能會造成程序效率低下甚至崩潰
Python分配內(nèi)存的時候又分為大內(nèi)存和小內(nèi)存,大內(nèi)存以256字節(jié)為界限,對于大內(nèi)存使用Malloc進行分配,而對于小內(nèi)存則使用內(nèi)存池進行分配,由于小內(nèi)存的分配和釋放是頻繁的,因此內(nèi)存池的使用大大提高了Python的執(zhí)行效率。
引用計數(shù)在Python中大多數(shù)對象的生命周期都是通過引用計數(shù)來管理的,引用技術(shù)也是一種最直觀最簡單的垃圾收集技術(shù)
每個Python對象都有一個引用計數(shù)器,用于記錄多少變量指向這個對象,可以通過sys模塊的getrefcount查詢獲得
每一個對象都會維護一個引用計數(shù)器,當(dāng)一個對象被引用的時候,它的計數(shù)器就+1,當(dāng)一個對象的引用被銷毀的時候,計數(shù)器-1,當(dāng)這個對象的引用計數(shù)為0的時候,說明這個對象已經(jīng)沒有使用了,可以被釋放,就會被回收,具有實時性。由于引用計數(shù)需要維護計數(shù)器等額外的操作,為了與引用計數(shù)搭配,在內(nèi)存的分配和釋放上獲得最高的效率,Python因此設(shè)計了大量的內(nèi)存池機制。
下面這些情況引用計數(shù)+1
(1). 對象被創(chuàng)建: a = 4
(2). 引用被復(fù)制: y = x
(3). 被作為參數(shù)傳遞給函數(shù): f(x)
(4). 作為容器對象的一個元素: a = [1, x]
下面這些情況引用計數(shù)-1
(1). 離開作用域,比如f(x)函數(shù)結(jié)束的時候,x只想的對象引用減1
(2). 引用被顯式地銷毀: del x
(3). 對象的一個別名被賦值給其他對象: y = 1
(4). 對象從一個容器對象中移除: l.remove(x)
(5). 容器對象本身被銷毀: del l
Python的內(nèi)存管理主要以引用計數(shù)為主,引用計數(shù)機制能釋放大部分無用對象,除了第一種情況,循環(huán)引用,因為循環(huán)引用的對象那個引用計數(shù)器永不為0。
循環(huán)引用,就是一個對象直接或者間接引用自己本身,導(dǎo)致計數(shù)器不為0
以上就是Python 內(nèi)存管理機制全面分析的詳細(xì)內(nèi)容,更多關(guān)于python 內(nèi)存管理機制的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. Jsp中request的3個基礎(chǔ)實踐2. Django程序的優(yōu)化技巧3. XML入門的常見問題(一)4. IntelliJ IDEA 統(tǒng)一設(shè)置編碼為utf-8編碼的實現(xiàn)5. jsp EL表達(dá)式詳解6. Django ORM實現(xiàn)按天獲取數(shù)據(jù)去重求和例子7. chat.asp聊天程序的編寫方法8. Python多線程操作之互斥鎖、遞歸鎖、信號量、事件實例詳解9. idea設(shè)置自動導(dǎo)入依賴的方法步驟10. 怎樣才能用js生成xmldom對象,并且在firefox中也實現(xiàn)xml數(shù)據(jù)島?
