快捷導(dǎo)航

Python 內(nèi)存管理機(jī)制全面分析

更新時間：2021年01月16日 15:45:50 作者：風(fēng)不再來

這篇文章主要介紹了Python 內(nèi)存管理機(jī)制全面分析，幫助大家更好的理解和使用python，感興趣的朋友可以了解下

內(nèi)存管理:

概述

在Python中，內(nèi)存管理涉及到一個包含所有Python對象和數(shù)據(jù)結(jié)構(gòu)的私有堆(heap). 這個私有堆的管理由內(nèi)部的Python內(nèi)存管理器保證。Python內(nèi)存管理器有不同的組件來處理各種動態(tài)存儲管理方面的問題，如共享，分割，預(yù)分配或緩存。

在最底層，一個原始內(nèi)存分配器通過與操作系統(tǒng)的內(nèi)存管理器交互，確保私有堆有足夠的空間來存儲所有與Python相關(guān)的數(shù)據(jù)。在原始內(nèi)存分配器的基礎(chǔ)上，幾個對象特定的分配器在同一個堆上運行，并根據(jù)每種對象類型的特點實現(xiàn)不同的內(nèi)存管理策略。例如，整數(shù)對象在堆內(nèi)的管理方式不同于字符串，元祖，或者字典。因為整數(shù)需要不同的存儲需求和速度與空間的權(quán)衡。因此，Python內(nèi)存管理器將一些工作分配給對象特定分配器，但確保后者在私有堆的范圍內(nèi)運行。

Python堆內(nèi)存的管理由解釋器來執(zhí)行，用戶對他沒有控制權(quán)，即使他們經(jīng)常操作只想堆內(nèi)存塊的對象指針，理解這一點非常重要。Python對象和其他內(nèi)部緩沖區(qū)的堆空間分配是由Python內(nèi)存管理器按需通過本文檔中列出的Python/C API函數(shù)進(jìn)行的。

內(nèi)存管理機(jī)制

Python的內(nèi)存管理總共分為4層(Layer0-3)

第一層Layer1的僅僅是對malloc的簡單包裝, raw memory，目的是為了兼容各個操作系統(tǒng)，因為不同的操作系統(tǒng)調(diào)用malloc的時候可能會有不同的行為結(jié)果；第二層Layer2是內(nèi)存管理機(jī)制的核心，其中g(shù)c就是在這一層發(fā)揮至關(guān)重要的作用。第三層，是對象緩沖池，如Python對一些對象的直接操作，包括int，list等

對于可能被經(jīng)常使用，而且是immutable的對象，如bool類型，元祖類型，小的整數(shù)，長度較短的字符串等，Python會緩存在layer3，直接供Python調(diào)用，避免頻繁的創(chuàng)建和銷毀。'

當(dāng)一個對象邏輯上不被使用了，但并沒有被釋放，那么就存在內(nèi)存泄漏，很可能會造成程序效率低下甚至崩潰

Python分配內(nèi)存的時候又分為大內(nèi)存和小內(nèi)存，大內(nèi)存以256字節(jié)為界限，對于大內(nèi)存使用Malloc進(jìn)行分配，而對于小內(nèi)存則使用內(nèi)存池進(jìn)行分配，由于小內(nèi)存的分配和釋放是頻繁的，因此內(nèi)存池的使用大大提高了Python的執(zhí)行效率。

引用計數(shù)

在Python中大多數(shù)對象的生命周期都是通過引用計數(shù)來管理的，引用技術(shù)也是一種最直觀最簡單的垃圾收集技術(shù)

每個Python對象都有一個引用計數(shù)器，用于記錄多少變量指向這個對象，可以通過sys模塊的getrefcount查詢獲得

每一個對象都會維護(hù)一個引用計數(shù)器，當(dāng)一個對象被引用的時候，它的計數(shù)器就+1，當(dāng)一個對象的引用被銷毀的時候，計數(shù)器-1，當(dāng)這個對象的引用計數(shù)為0的時候，說明這個對象已經(jīng)沒有使用了，可以被釋放，就會被回收，具有實時性。由于引用計數(shù)需要維護(hù)計數(shù)器等額外的操作，為了與引用計數(shù)搭配，在內(nèi)存的分配和釋放上獲得最高的效率，Python因此設(shè)計了大量的內(nèi)存池機(jī)制。

下面這些情況引用計數(shù)+1

(1). 對象被創(chuàng)建: a = 4

(2). 引用被復(fù)制: y = x

(3). 被作為參數(shù)傳遞給函數(shù): f(x)

(4). 作為容器對象的一個元素: a = [1, x]

下面這些情況引用計數(shù)-1

(1). 離開作用域，比如f(x)函數(shù)結(jié)束的時候，x只想的對象引用減1

(2). 引用被顯式地銷毀: del x

(3). 對象的一個別名被賦值給其他對象: y = 1

(4). 對象從一個容器對象中移除: l.remove(x)

(5). 容器對象本身被銷毀: del l

Python的內(nèi)存管理主要以引用計數(shù)為主，引用計數(shù)機(jī)制能釋放大部分無用對象，除了第一種情況，循環(huán)引用，因為循環(huán)引用的對象那個引用計數(shù)器永不為0。