超過十年以上，沒有比解釋器全局鎖（GIL）讓Python新手和專家更有挫折感或者更有好奇心。

未解決的問題

隨處都是問題懂拾。難度大捅儒、耗時多肯定是其中一個問題液样。僅僅是嘗試解決這個問題就會讓人驚訝。之前是整個社區(qū)的嘗試巧还，但現(xiàn)在只是外圍的開發(fā)人員在努力鞭莽。對于新手，去嘗試解決這樣的問題麸祷，主要是因為問題難度足夠大澎怒，解決之后可以獲得相當?shù)臉s譽。計算機科學中未解決的 P = NP 就是這樣的問題阶牍。對此如果能給出多項式時間復(fù)雜度的答案喷面，那簡直就可以改變世界了。Python最困難的問題比證明P = NP要容易一些走孽，不過迄今仍然沒有一個滿意的解決惧辈，要知道，這個問題的實用的解決方案同樣能起著變革性的作用磕瓷。正因為如此盒齿，很容易看到Python社區(qū)會有如此多的人關(guān)注于這樣的問題: “對于解釋器全局鎖能做什么?”

Python的底層

要理解GIL的含義，我們需要從Python的基礎(chǔ)講起困食。像C++這樣的語言是編譯型語言县昂，所謂編譯型語言，是指程序輸入到編譯器陷舅，編譯器再根據(jù)語言的語法進行解析倒彰，然后翻譯成語言獨立的中間表示，最終鏈接成具有高度優(yōu)化的機器碼的可執(zhí)行程序莱睁。編譯器之所以可以深層次的對代碼進行優(yōu)化待讳，是因為它可以看到整個程序（或者一大塊獨立的部分）。這使得它可以對不同的語言指令之間的交互進行推理仰剿，從而給出更有效的優(yōu)化手段创淡。

與此相反，Python是解釋型語言南吮。程序被輸入到解釋器來運行琳彩。解釋器在程序執(zhí)行之前對其并不了解；它所知道的只是Python的規(guī)則，以及在執(zhí)行過程中怎樣去動態(tài)的應(yīng)用這些規(guī)則露乏。它也有一些優(yōu)化碧浊，但是這基本上只是另一個級別的優(yōu)化。由于解釋器沒法很好的對程序進行推導(dǎo)瘟仿，Python的大部分優(yōu)化其實是解釋器自身的優(yōu)化箱锐。更快的解釋器自然意味著程序的運行也能“免費”的更快。也就是說劳较，解釋器優(yōu)化后驹止，Python程序不用做修改就可以享受優(yōu)化后的好處。

這一點很重要观蜗，讓我們再強調(diào)一下臊恋。如果其他條件不變，Python程序的執(zhí)行速度直接與解釋器的“速度”相關(guān)墓捻。不管你怎樣優(yōu)化自己的程序抖仅，你的程序的執(zhí)行速度還是依賴于解釋器執(zhí)行你的程序的效率。這就很明顯的解釋了為什么我們需要對優(yōu)化Python解釋器做這么多的工作了毙替。對于Python程序員來說岸售，這恐怕是與免費午餐最接近的了践樱。

免費午餐結(jié)束了

還是沒有結(jié)束厂画？摩爾定律給出了硬件速度會按照確定的時間周期增長，與此同時拷邢，整整一代程序員學會了如何編碼袱院。如果一個人寫了比較慢的代碼，最簡單的結(jié)果通常是更快的處理器去等待代碼的執(zhí)行瞭稼。顯然忽洛，摩爾定律仍然是正確的，并且還會在很長一段時間生效环肘，不過它提及的方式有了根本的變化欲虚。并非是時鐘頻率增長到一個高不可攀的速度，而是通過多核來利用晶體管密度提高帶來的好處悔雹。在新處理器上運行的程序要想充分利用其性能复哆，必須按照并發(fā)方式進行重寫。

大部分開發(fā)者聽到“并發(fā)”通常會立刻想到多線程的程序腌零。目前來說梯找，多線程執(zhí)行還是利用多核系統(tǒng)最常用的方式。盡管多線程編程大大好于“順序”編程益涧，不過即便是仔細的程序員也沒法在代碼中將并發(fā)性做到最好锈锤。編程語言在這方面應(yīng)該做的更好，大部分應(yīng)用廣泛的現(xiàn)代編程語言都會支持多線程編程。

意外的事實

現(xiàn)在我們來看一下問題的癥結(jié)所在久免。要想利用多核系統(tǒng)浅辙，Python必須支持多線程運行。作為解釋型語言妄壶，Python的解釋器必須做到既安全又高效摔握。我們都知道多線程編程會遇到的問題。解釋器要留意的是避免在不同的線程操作內(nèi)部共享的數(shù)據(jù)丁寄。同時它還要保證在管理用戶線程時保證總是有最大化的計算資源氨淌。

那么，不同線程同時訪問時伊磺，數(shù)據(jù)的保護機制是怎樣的呢盛正？答案是解釋器全局鎖。從名字上看能告訴我們很多東西屑埋，很顯然豪筝，這是一個加在解釋器上的全局（從解釋器的角度看）鎖（從互斥或者類似角度看）。這種方式當然很安全摘能，但是它有一層隱含的意思（Python初學者需要了解這個）：對于任何Python程序续崖，不管有多少的處理器，任何時候都總是只有一個線程在執(zhí)行团搞。

許多人都是偶然發(fā)現(xiàn)這個事實的严望。網(wǎng)上的很多討論組和留言板都充斥著來自Python初學者和專家的類似這樣的問題——”為什么我全新的多線程Python程序運行得比其只有一個線程的時候還要慢？“許多人在問這個問題時還是非常犯暈的逻恐，因為顯然一個具有兩個線程的程序要比其只有一個線程時要快（假設(shè)該程序確實是可并行的）像吻。事實上，這個問題被問得如此頻繁以至于Python的專家們精心制作了一個標準答案：”不要使用多線程复隆，請使用多進程拨匆。“但這個答案比那個問題更加讓人困惑挽拂。難道我不能在Python中使用多線程惭每？在Python這樣流行的一個語言中使用多線程究竟是有多糟糕，連專家都建議不要使用亏栈。難道我真的漏掉了一些東西台腥？

很遺憾，沒有任何東西被漏掉仑扑。由于Python解釋器的設(shè)計览爵，使用多線程以提高性能應(yīng)該算是一個困難的任務(wù)。在最壞的情況下镇饮，它將會降低（有時很明顯）你的程序的運行速度蜓竹。一個計算機科學與技術(shù)專業(yè)的大學生新手可能會告訴你當多個線程都在競爭一個共享資源時將會發(fā)生什么。結(jié)果通常不會非常理想。很多情況下多線程都能很好地工作俱济，可能對于解釋器的實現(xiàn)和內(nèi)核開發(fā)人員來說嘶是，沒有關(guān)于Python多線程性能的過多抱怨。

現(xiàn)在該怎么辦蛛碌？驚慌聂喇？

那么，這又能怎樣蔚携？問題解決了嗎希太？難道我們作為Python開發(fā)人員就意味著要放棄使用多線程來探索并行的想法了？為什么無論怎樣酝蜒，GIL需要保證只有一個線程在某一時刻處于運行中誊辉？難道不可以添加細粒度的鎖來阻止多個獨立對象的同時訪問？并且為什么之前沒有人去嘗試過類似的事情亡脑？

這些實用的問題有著十分有趣的回答堕澄。GIL對諸如當前線程狀態(tài)和為垃圾回收而用的堆分配對象這樣的東西的訪問提供著保護。然而霉咨，這對Python語言來說沒什么特殊的蛙紫，它需要使用一個GIL。這是該實現(xiàn)的一種典型產(chǎn)物⊥窘洌現(xiàn)在也有其它的Python解釋器（和編譯器）并不使用GIL坑傅。雖然，對于CPython來說棺滞，自其出現(xiàn)以來已經(jīng)有很多不使用GIL的解釋器裁蚁。

那么為什么不拋棄GIL呢矢渊？許多人也許不知道继准，在1999年，針對Python 1.5矮男，一個經(jīng)常被提到但卻不怎么理解的“free threading”補丁已經(jīng)嘗試實現(xiàn)了這個想法移必，該補丁來自Greg Stein。在這個補丁中毡鉴，GIL被完全的移除崔泵，且用細粒度的鎖來代替。然而猪瞬，GIL的移除給單線程程序的執(zhí)行速度帶來了一定的代價憎瘸。當用單線程執(zhí)行時，速度大約降低了40%陈瘦。使用兩個線程展示出了在速度上的提高幌甘，但除了這個提高，這個收益并沒有隨著核數(shù)的增加而線性增長。由于執(zhí)行速度的降低锅风，這一補丁被拒絕了酥诽，并且?guī)缀醣蝗诉z忘。

移除GIL非常困難皱埠，讓我們?nèi)ベ徫锇桑?/p>

（譯者注：XXX is hard. Let’s go shopping!在英語中類似于中文的咆哮體肮帐。其隱含意思為想成功完成某件事情非常困難，我們?nèi)ブ苯訉ふ业谌降漠a(chǎn)品替代吧边器。）

不過训枢，“free threading”這個補丁是有啟發(fā)性意義的，其證明了一個關(guān)于Python解釋器的基本要點：移除GIL是非常困難的忘巧。由于該補丁發(fā)布時所處的年代肮砾，解釋器變得依賴更多的全局狀態(tài)，這使得想要移除當今的GIL變得更加困難袋坑。值得一提的是仗处，也正是因為這個原因，許多人對于嘗試移除GIL變得更加有興趣枣宫。困難的問題往往很有趣婆誓。

但是這可能有點被誤導(dǎo)了。讓我們考慮一下：如果我們有了一個神奇的補丁也颤，其移除了GIL洋幻，并且沒有對單線程的Python代碼產(chǎn)生性能上的下降，那么什么事情將會發(fā)生翅娶？我們將會獲得我們一直想要的：一個線程API可能會同時利用所有的處理器文留。那么現(xiàn)在，我們已經(jīng)獲得了我們希望的竭沫，但這確實是一個好事嗎燥翅？

基于線程的編程毫無疑問是困難的。每當某個人覺得他了解關(guān)于線程是如何工作的一切的時候蜕提，總是會悄無聲息的出現(xiàn)一些新的問題森书。因為在這方面想要得到正確合理的一致性真的是太難了，因此有一些非常知名的語言設(shè)計者和研究者已經(jīng)總結(jié)得出了一些線程模型谎势。就像某個寫過多線程應(yīng)用的人可以告訴你的一樣凛膏，不管是多線程應(yīng)用的開發(fā)還是調(diào)試都會比單線程的應(yīng)用難上數(shù)倍。程序員通常所具有的順序執(zhí)行的思維模恰恰就是與并行執(zhí)行模式不相匹配脏榆。GIL的出現(xiàn)無意中幫助了開發(fā)者免于陷入困境猖毫。在使用多線程時仍然需要同步原語的情況下，GIL事實上幫助我們保持不同線程之間的數(shù)據(jù)一致性問題须喂。

那么現(xiàn)在看起來討論Python最難得問題是有點問錯了問題吁断。我們有非常好的理由來說明為什么Python專家推薦我們使用多進程代替多線程典唇，而不是去試圖隱藏Python線程實現(xiàn)的不足。更進一步胯府，我們鼓勵開發(fā)者使用更安全更直接的方式實現(xiàn)并發(fā)模型介衔，同時保留使用多線程進行開發(fā)除非你覺的真的非常必要的話。對于大多數(shù)人來說什么是最好的并行編程模型可能并不是十分清楚骂因。但是目前我們清楚的是多線程的方式可能并不是最好的炎咖。

至于GIL，不要認為它在那的存在就是靜態(tài)的和未經(jīng)分析過的寒波。Antoine Pitrou 在Python 3.2中實現(xiàn)了一個新的GIL乘盼，并且?guī)е恍┓e極的結(jié)果。這是自1992年以來俄烁，GIL的一次最主要改變绸栅。這個改變非常巨大，很難在這里解釋清楚页屠，但是從一個更高層次的角度來說粹胯，舊的GIL通過對Python指令進行計數(shù)來確定何時放棄GIL。這樣做的結(jié)果就是辰企，單條Python指令將會包含大量的工作风纠，即它們并沒有被1:1的翻譯成機器指令。在新的GIL實現(xiàn)中牢贸，用一個固定的超時時間來指示當前的線程以放棄這個鎖竹观。在當前線程保持這個鎖，且當?shù)诙€線程請求這個鎖的時候潜索，當前線程就會在5ms后被強制釋放掉這個鎖（這就是說臭增，當前線程每5ms就要檢查其是否需要釋放這個鎖）。當任務(wù)是可行的時候竹习，這會使得線程間的切換更加可預(yù)測誊抛。

然而，這并不是一個完美的改變由驹。對于在各種類型的任務(wù)上有效利用GIL這個領(lǐng)域里芍锚，最活躍的研究者可能就是David Beazley了昔园。除了對Python 3.2之前的GIL研究最深入蔓榄，他還研究了這個最新的GIL實現(xiàn)，并且發(fā)現(xiàn)了很多有趣的程序方案默刚。對于這些程序甥郑，即使是新的GIL實現(xiàn)，其表現(xiàn)也相當糟糕荤西。他目前仍然通過一些實際的研究和發(fā)布一些實驗結(jié)果來引領(lǐng)并推進著有關(guān)GIL的討論澜搅。

不管某一個人對Python的GIL感覺如何伍俘，它仍然是Python語言里最困難的技術(shù)挑戰(zhàn)。想要理解它的實現(xiàn)需要對操作系統(tǒng)設(shè)計勉躺、多線程編程癌瘾、C語言、解釋器設(shè)計和CPython解釋器的實現(xiàn)有著非常徹底的理解饵溅。單是這些所需準備的就妨礙了很多開發(fā)者去更徹底的研究GIL妨退。雖然如此，并沒有跡象表明GIL在不久以后的任何一段時間內(nèi)會遠離我們蜕企。目前咬荷，它將繼續(xù)給那些新接觸Python，并且與此同時又對解決非常困難的技術(shù)問題感興趣的人帶來困惑和驚喜轻掩。

以上內(nèi)容是基于我目前對Python解釋器所做出的研究而寫幸乒。雖然我還希望寫一些有關(guān)解釋器的其它方面內(nèi)容，但是沒有任何一個比全局解釋器鎖（GIL）更為人所知唇牧。雖然我認為這里有些內(nèi)容是不準確的罕扎，但是這些技術(shù)上的細節(jié)與CPython的很多資源條目是不同的。如果你發(fā)現(xiàn)了不準確的內(nèi)容丐重，請及時告知我壳影，這樣我就會盡快對其進行改正。

由于資料太多弥臼，我就不一一展示了宴咧，需要學習資料的可以加我QQ----2507362121私聊我哦。同樣有什么疑問的地方也可以找我径缅。