【譯】使用Python的__slots__節(jié)省了9G的內(nèi)存

此文章作者使用python的__slots__節(jié)省了將近9G的內(nèi)存
原文鏈接: http://tech.oyster.com/save-ram-with-python-slots/

我們前面提到過Oyster.com的Python Web服務(wù)器是使用Python Dict存儲大量的靜態(tài)內(nèi)容的包斑。最近誉察,我們使用Python的__slots__在4個處理器中每個處理器節(jié)省了2G的內(nèi)存空間单刁。
下面是一張我們使用這個方法前后的內(nèi)存快照:


我們差不多創(chuàng)建了上百萬個Image類的實例:

class Image(object):
    __slots__ = ['id', 'caption', 'url']

    def __init__(self, id, caption, url):
        self.id = id
        self.caption = caption
        self.url = url
        self._setup()

    # ... other methods ...

通常情況下Python使用dict來存儲實例,這樣非常好叫胖,它允許在運行時對實例設(shè)置變量。
然而,對一些在編譯期就已經(jīng)知道有什么變量的類挟阻,dict是非常耗內(nèi)存的店读,當(dāng)創(chuàng)建上百萬個實例的時候嗦枢,不足就更加突出了。你可以使用__slots__告知Python不用dict屯断,只分配固定的空間來存儲已知的屬性

class Image(object):
    __slots__ = ['id', 'caption', 'url']

    def __init__(self, id, caption, url):
        self.id = id
        self.caption = caption
        self.url = url
        self._setup()

    # ... other methods ...

需要注意的是文虏,你也可以使用collections.namedtuple來實現(xiàn)上面的結(jié)果,然而對我來說這種方式總是感覺奇怪殖演,如果你想定制初始化氧秘,你需要重載__new__,而不是__init__趴久。

注意:不用過早的優(yōu)化和使用這個方法丸相,它不利于代碼維護,當(dāng)實例很多(上千萬)時彼棍,這種優(yōu)化才有明顯的效果已添。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子隔心,更是在濱河造成了極大的恐慌仇矾,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,657評論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件缆蝉,死亡現(xiàn)場離奇詭異,居然都是意外死亡瘦真,警方通過查閱死者的電腦和手機刊头,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,889評論 3 394
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來诸尽,“玉大人原杂,你說我怎么就攤上這事∧” “怎么了穿肄?”我有些...
    開封第一講書人閱讀 164,057評論 0 354
  • 文/不壞的土叔 我叫張陵年局,是天一觀的道長。 經(jīng)常有香客問我咸产,道長矢否,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,509評論 1 293
  • 正文 為了忘掉前任脑溢,我火速辦了婚禮僵朗,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘屑彻。我一直安慰自己验庙,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,562評論 6 392
  • 文/花漫 我一把揭開白布社牲。 她就那樣靜靜地躺著壶谒,像睡著了一般。 火紅的嫁衣襯著肌膚如雪膳沽。 梳的紋絲不亂的頭發(fā)上汗菜,一...
    開封第一講書人閱讀 51,443評論 1 302
  • 那天,我揣著相機與錄音挑社,去河邊找鬼陨界。 笑死,一個胖子當(dāng)著我的面吹牛痛阻,可吹牛的內(nèi)容都是我干的菌瘪。 我是一名探鬼主播,決...
    沈念sama閱讀 40,251評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼阱当,長吁一口氣:“原來是場噩夢啊……” “哼俏扩!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起弊添,我...
    開封第一講書人閱讀 39,129評論 0 276
  • 序言:老撾萬榮一對情侶失蹤录淡,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后油坝,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體嫉戚,經(jīng)...
    沈念sama閱讀 45,561評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,779評論 3 335
  • 正文 我和宋清朗相戀三年澈圈,在試婚紗的時候發(fā)現(xiàn)自己被綠了彬檀。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,902評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡瞬女,死狀恐怖窍帝,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情诽偷,我是刑警寧澤坤学,帶...
    沈念sama閱讀 35,621評論 5 345
  • 正文 年R本政府宣布疯坤,位于F島的核電站,受9級特大地震影響拥峦,放射性物質(zhì)發(fā)生泄漏贴膘。R本人自食惡果不足惜卖子,卻給世界環(huán)境...
    茶點故事閱讀 41,220評論 3 328
  • 文/蒙蒙 一略号、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧洋闽,春花似錦玄柠、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,838評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至刊懈,卻和暖如春这弧,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背虚汛。 一陣腳步聲響...
    開封第一講書人閱讀 32,971評論 1 269
  • 我被黑心中介騙來泰國打工匾浪, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人卷哩。 一個月前我還...
    沈念sama閱讀 48,025評論 2 370
  • 正文 我出身青樓蛋辈,卻偏偏與公主長得像,于是被迫代替她去往敵國和親将谊。 傳聞我的和親對象是個殘疾皇子冷溶,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,843評論 2 354

推薦閱讀更多精彩內(nèi)容