python中yield的使用

帶有 yield 的函數(shù)在 Python 中被稱之為 generator(生成器)姆打,何謂 generator 容客?

我們先拋開 generator冀泻,以一個(gè)常見的編程題目來(lái)展示 yield 的概念桃序。

如何生成斐波那契數(shù)列

斐波那契(Fibonacci)數(shù)列是一個(gè)非常簡(jiǎn)單的遞歸數(shù)列棒假,除第一個(gè)和第二個(gè)數(shù)外溯职,任意一個(gè)數(shù)都可由前兩個(gè)數(shù)相加得到。用計(jì)算機(jī)程序輸出斐波那契數(shù)列的前 N 個(gè)數(shù)是一個(gè)非常簡(jiǎn)單的問(wèn)題帽哑,許多初學(xué)者都可以輕易寫出如下函數(shù):

清單 1. 簡(jiǎn)單輸出斐波那契數(shù)列前 N 個(gè)數(shù)

1

2

3

4

5

6

def fab(max):

???n, a, b = 0, 0, 1

???while n < max:

???????print b

???????a, b = b, a + b

???????n = n + 1

執(zhí)行 fab(5)谜酒,我們可以得到如下輸出:

1

2

3

4

5

6

>>> fab(5)

1

1

2

3

5

結(jié)果沒(méi)有問(wèn)題,但有經(jīng)驗(yàn)的開發(fā)者會(huì)指出妻枕,直接在 fab 函數(shù)中用 print 打印數(shù)字會(huì)導(dǎo)致該函數(shù)可復(fù)用性較差僻族,因?yàn)?fab 函數(shù)返回 None粘驰,其他函數(shù)無(wú)法獲得該函數(shù)生成的數(shù)列。

要提高 fab 函數(shù)的可復(fù)用性述么,最好不要直接打印出數(shù)列蝌数,而是返回一個(gè) List。以下是 fab 函數(shù)改寫后的第二個(gè)版本:

清單 2. 輸出斐波那契數(shù)列前 N 個(gè)數(shù)第二版

1

2

3

4

5

6

7

8

def fab(max):

???n, a, b = 0, 0, 1

???L = []

???while n < max:

???????L.append(b)

???????a, b = b, a + b

???????n = n + 1

???return L

可以使用如下方式打印出 fab 函數(shù)返回的 List:

1

2

3

4

5

6

7

8

>>> for n in fab(5):

...???? print n

...

1

1

2

3

5

改寫后的 fab 函數(shù)通過(guò)返回 List 能滿足復(fù)用性的要求度秘,但是更有經(jīng)驗(yàn)的開發(fā)者會(huì)指出顶伞,該函數(shù)在運(yùn)行中占用的內(nèi)存會(huì)隨著參數(shù) max 的增大而增大,如果要控制內(nèi)存占用剑梳,最好不要用 List

來(lái)保存中間結(jié)果唆貌,而是通過(guò) iterable 對(duì)象來(lái)迭代。例如垢乙,在 Python2.x 中锨咙,代碼:

清單 3. 通過(guò) iterable 對(duì)象來(lái)迭代

1for i in range(1000): pass

會(huì)導(dǎo)致生成一個(gè) 1000 個(gè)元素的 List,而代碼:

1for i in xrange(1000): pass

則不會(huì)生成一個(gè) 1000 個(gè)元素的 List侨赡,而是在每次迭代中返回下一個(gè)數(shù)值蓖租,內(nèi)存空間占用很小。因?yàn)?xrange 不返回 List羊壹,而是返回一個(gè) iterable 對(duì)象蓖宦。

利用 iterable 我們可以把 fab 函數(shù)改寫為一個(gè)支持 iterable 的 class,以下是第三個(gè)版本的 Fab:

清單 4. 第三個(gè)版本

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

class Fab(object):


???def __init__(self, max):

???????self.max = max

???????self.n, self.a, self.b = 0, 0, 1


???def __iter__(self):

???????return self


???def next(self):

???????if self.n < self.max:

???????????r = self.b

???????????self.a, self.b = self.b, self.a + self.b

???????????self.n = self.n + 1

???????????return r

???????raise StopIteration()

Fab 類通過(guò) next() 不斷返回?cái)?shù)列的下一個(gè)數(shù)油猫,內(nèi)存占用始終為常數(shù):

1

2

3

4

5

6

7

8

>>> for n in Fab(5):

...???? print n

...

1

1

2

3

5

然而稠茂,使用 class 改寫的這個(gè)版本,代碼遠(yuǎn)遠(yuǎn)沒(méi)有第一版的 fab 函數(shù)來(lái)得簡(jiǎn)潔情妖。如果我們想要保持第一版 fab 函數(shù)的簡(jiǎn)潔性睬关,同時(shí)又要獲得 iterable 的效果,yield 就派上用場(chǎng)了:

清單 5. 使用 yield 的第四版

1

2

3

4

5

6

7

8

9

def fab(max):

????n, a, b = 0, 0, 1

????while n < max:

????????yield b

????????# print b

????????a, b = b, a + b

????????n = n + 1


'''

第四個(gè)版本的 fab 和第一版相比毡证,僅僅把 print b 改為了 yield b电爹,就在保持簡(jiǎn)潔性的同時(shí)獲得了 iterable 的效果。

調(diào)用第四版的 fab 和第二版的 fab 完全一致:

1

2

3

4

5

6

7

8

>>> for n in fab(5):

...???? print n

...

1

1

2

3

5

簡(jiǎn)單地講料睛,yield 的作用就是把一個(gè)函數(shù)變成一個(gè) generator丐箩,帶有 yield 的函數(shù)不再是一個(gè)普通函數(shù),Python 解釋器會(huì)將其視為一個(gè) generator恤煞,調(diào)用 fab(5) 不會(huì)執(zhí)行 fab 函數(shù)屎勘,而是返回一個(gè) iterable 對(duì)象!在 for 循環(huán)執(zhí)行時(shí)居扒,每次循環(huán)都會(huì)執(zhí)行 fab 函數(shù)內(nèi)部的代碼概漱,執(zhí)行到 yield b 時(shí),fab 函數(shù)就返回一個(gè)迭代值喜喂,下次迭代時(shí)瓤摧,代碼從 yield b 的下一條語(yǔ)句繼續(xù)執(zhí)行竿裂,而函數(shù)的本地變量看起來(lái)和上次中斷執(zhí)行前是完全一樣的,于是函數(shù)繼續(xù)執(zhí)行姻灶,直到再次遇到 yield铛绰。

也可以手動(dòng)調(diào)用 fab(5) 的 next() 方法(因?yàn)?fab(5) 是一個(gè) generator 對(duì)象,該對(duì)象具有 next() 方法)产喉,這樣我們就可以更清楚地看到 fab 的執(zhí)行流程:

清單 6. 執(zhí)行流程

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

>>> f = fab(5)

>>> f.next()

1

>>> f.next()

1

>>> f.next()

2

>>> f.next()

3

>>> f.next()

5

>>> f.next()

Traceback (most recent call last):

?File "<stdin>", line 1, in <module>

StopIteration

當(dāng)函數(shù)執(zhí)行結(jié)束時(shí)捂掰,generator 自動(dòng)拋出 StopIteration 異常,表示迭代完成曾沈。在 for 循環(huán)里这嚣,無(wú)需處理 StopIteration 異常,循環(huán)會(huì)正常結(jié)束塞俱。

我們可以得出以下結(jié)論:

一個(gè)帶有 yield 的函數(shù)就是一個(gè) generator姐帚,它和普通函數(shù)不同,生成一個(gè) generator 看起來(lái)像函數(shù)調(diào)用障涯,但不會(huì)執(zhí)行任何函數(shù)代碼罐旗,直到對(duì)其調(diào)用 next()(在 for 循環(huán)中會(huì)自動(dòng)調(diào)用 next())才開始執(zhí)行。雖然執(zhí)行流程仍按函數(shù)的流程執(zhí)行唯蝶,但每執(zhí)行到一個(gè) yield 語(yǔ)句就會(huì)中斷九秀,并返回一個(gè)迭代值,下次執(zhí)行時(shí)從 yield 的下一個(gè)語(yǔ)句繼續(xù)執(zhí)行粘我」难眩看起來(lái)就好像一個(gè)函數(shù)在正常執(zhí)行的過(guò)程中被 yield 中斷了數(shù)次,每次中斷都會(huì)通過(guò) yield 返回當(dāng)前的迭代值征字。

yield 的好處是顯而易見的都弹,把一個(gè)函數(shù)改寫為一個(gè) generator 就獲得了迭代能力,比起用類的實(shí)例保存狀態(tài)來(lái)計(jì)算下一個(gè) next() 的值匙姜,不僅代碼簡(jiǎn)潔畅厢,而且執(zhí)行流程異常清晰。

如何判斷一個(gè)函數(shù)是否是一個(gè)特殊的 generator 函數(shù)氮昧?可以利用 isgeneratorfunction 判斷:

清單 7. 使用 isgeneratorfunction 判斷

1

2

3

>>> from inspect import isgeneratorfunction

>>> isgeneratorfunction(fab)

True

要注意區(qū)分 fab 和 fab(5)或详,fab 是一個(gè) generator function,而 fab(5) 是調(diào)用 fab 返回的一個(gè) generator郭计,好比類的定義和類的實(shí)例的區(qū)別:

清單 8. 類的定義和類的實(shí)例

1

2

3

4

5

>>> import types

>>> isinstance(fab, types.GeneratorType)

False

>>> isinstance(fab(5), types.GeneratorType)

True

fab 是無(wú)法迭代的,而 fab(5) 是可迭代的:

1

2

3

4

5

>>> from collections import Iterable

>>> isinstance(fab, Iterable)

False

>>> isinstance(fab(5), Iterable)

True

每次調(diào)用 fab 函數(shù)都會(huì)生成一個(gè)新的 generator 實(shí)例椒振,各實(shí)例互不影響:

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

>>> f1 = fab(3)

>>> f2 = fab(5)

>>> print 'f1:', f1.next()

f1: 1

>>> print 'f2:', f2.next()

f2: 1

>>> print 'f1:', f1.next()

f1: 1

>>> print 'f2:', f2.next()

f2: 1

>>> print 'f1:', f1.next()

f1: 2

>>> print 'f2:', f2.next()

f2: 2

>>> print 'f2:', f2.next()

f2: 3

>>> print 'f2:', f2.next()

f2: 5

return 的作用

在一個(gè) generator function 中昭伸,如果沒(méi)有 return,則默認(rèn)執(zhí)行至函數(shù)完畢澎迎,如果在執(zhí)行過(guò)程中 return庐杨,則直接拋出 StopIteration 終止迭代选调。

另一個(gè)例子

另一個(gè) yield 的例子來(lái)源于文件讀取。如果直接對(duì)文件對(duì)象調(diào)用 read() 方法灵份,會(huì)導(dǎo)致不可預(yù)測(cè)的內(nèi)存占用仁堪。好的方法是利用固定長(zhǎng)度的緩沖區(qū)來(lái)不斷讀取文件內(nèi)容。通過(guò) yield填渠,我們不再需要編寫讀文件的迭代類弦聂,就可以輕松實(shí)現(xiàn)文件讀取:

清單 9. 另一個(gè) yield 的例子

1

2

3

4

5

6

7

8

9

def read_file(fpath):

???BLOCK_SIZE = 1024

???with open(fpath, 'rb') as f:

???????while True:

???????????block = f.read(BLOCK_SIZE)

???????????if block:

???????????????yield block

???????????else:

???????????????return

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末氛什,一起剝皮案震驚了整個(gè)濱河市莺葫,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌枪眉,老刑警劉巖捺檬,帶你破解...
    沈念sama閱讀 219,589評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異贸铜,居然都是意外死亡堡纬,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,615評(píng)論 3 396
  • 文/潘曉璐 我一進(jìn)店門蒿秦,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)烤镐,“玉大人,你說(shuō)我怎么就攤上這事渤早≈俺担” “怎么了?”我有些...
    開封第一講書人閱讀 165,933評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵鹊杖,是天一觀的道長(zhǎng)悴灵。 經(jīng)常有香客問(wèn)我,道長(zhǎng)骂蓖,這世上最難降的妖魔是什么积瞒? 我笑而不...
    開封第一講書人閱讀 58,976評(píng)論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮登下,結(jié)果婚禮上茫孔,老公的妹妹穿的比我還像新娘。我一直安慰自己被芳,他們只是感情好缰贝,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,999評(píng)論 6 393
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著畔濒,像睡著了一般剩晴。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,775評(píng)論 1 307
  • 那天赞弥,我揣著相機(jī)與錄音毅整,去河邊找鬼。 笑死绽左,一個(gè)胖子當(dāng)著我的面吹牛悼嫉,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播拼窥,決...
    沈念sama閱讀 40,474評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼戏蔑,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了闯团?” 一聲冷哼從身側(cè)響起辛臊,我...
    開封第一講書人閱讀 39,359評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎房交,沒(méi)想到半個(gè)月后彻舰,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,854評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡候味,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,007評(píng)論 3 338
  • 正文 我和宋清朗相戀三年刃唤,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片白群。...
    茶點(diǎn)故事閱讀 40,146評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡尚胞,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出帜慢,到底是詐尸還是另有隱情笼裳,我是刑警寧澤,帶...
    沈念sama閱讀 35,826評(píng)論 5 346
  • 正文 年R本政府宣布粱玲,位于F島的核電站躬柬,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏抽减。R本人自食惡果不足惜允青,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,484評(píng)論 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望卵沉。 院中可真熱鬧颠锉,春花似錦、人聲如沸史汗。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,029評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)停撞。三九已至瓷蛙,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背速挑。 一陣腳步聲響...
    開封第一講書人閱讀 33,153評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留副硅,地道東北人姥宝。 一個(gè)月前我還...
    沈念sama閱讀 48,420評(píng)論 3 373
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像恐疲,于是被迫代替她去往敵國(guó)和親腊满。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,107評(píng)論 2 356