1 Celery Application

介紹

Celery在使用時(shí)必須創(chuàng)造一個(gè)實(shí)例囊扳,也就是application吩翻,它是線程安全的兜看,所以多個(gè)Celery application(不同的配置、部件和任務(wù))都可以在一個(gè)進(jìn)程空間中存在狭瞎。

from celery import Celery
app = Celery()
app.main
<Celery __main__:0x100469fd0>  #  main module的名稱 __main__

名稱

當(dāng)發(fā)送任務(wù)信息時(shí)细移,是不包含任何源代碼的,只有一個(gè)任務(wù)名稱熊锭,而每個(gè)工作進(jìn)程都維持著一個(gè)任務(wù)名稱到具體函數(shù)的映射(任務(wù)注冊(cè))弧轧。每個(gè)任務(wù)在創(chuàng)建時(shí),是加在本地的碗殷,如果是在main函數(shù)中創(chuàng)建的精绎,任務(wù)名稱會(huì)以main起始∫诒猓可以使用顯示的方式指定任務(wù)名稱前綴:

>>> @app.task
... def add(x, y):
...     return x + y

>>> add
<@task: __main__.add>

>>> add.name
__main__.add

>>> app.tasks['__main__.add']
<@task: __main__.add>

以上的基本沒(méi)什么用

app = Celery('tasks')
app.main
tasks

這樣之后創(chuàng)建的task就會(huì)以tasks為前綴捺典,tasks.add鸟廓。

配置

配置以這樣的順序生效:
1从祝、運(yùn)行時(shí)的修改
2、配置模塊
3引谜、默認(rèn)的配置

使用模塊名稱

app = Celery()
app.config_from_object('celeryconfig')  

使用模塊

import celeryconfig
app.config_from_object(celeryconfig)

使用配置類

class Config:
    enable_utc = True
    timezone = 'Europe/London'

app.config_from_object(Config)

使用環(huán)境變量

os.environ.setdefault('CELERY_CONFIG_MODULE', 'celeryconfig')
app.config_from_envvar('CELERY_CONFIG_MODULE')

使用humanize打印配置信息

app.conf.humanize(with_defaults=False, censored=True)
# 不打印默認(rèn)的設(shè)置和敏感信息(如密碼)
app.conf.table(with_defaults=False, censored=True)
# 返回一個(gè)包含配置文件的dict

敏感信息指包含這些字符串的:

API, TOKEN, KEY, SECRET, PASS, SIGNATURE, DATABASE

Laziness

app

app只有在需要的時(shí)候才實(shí)例化出來(lái)牍陌,創(chuàng)建一個(gè)celery實(shí)例只是:

創(chuàng)建一個(gè)邏輯時(shí)鐘實(shí)例,用于events.
創(chuàng)建任務(wù)注冊(cè)
設(shè)置自己為當(dāng)前app(but not if the set_as_current argument was disabled)
調(diào)用app.on_init() (does nothing by default).

task

在task定義的地方并沒(méi)有構(gòu)造task员咽,在使用的時(shí)候才創(chuàng)建毒涧,或者被finalized

@app.task
def add(x, y):
    return x + y

add.__evaluated__()
False

add # 調(diào)用add的repr
<@task: __main__.add>
add.__evaluated__()
True

finalize

Finalization 顯式調(diào)用 app.finalize() 或 獲取app.tasks的屬性

復(fù)制需要在應(yīng)用之間共享的任務(wù)

默認(rèn)為共享的,如果設(shè)為不共享則任務(wù)是綁定它的app所私有的贝室。

運(yùn)行所有的task裝飾器

確保所有的task綁定到當(dāng)前app

這樣task可以讀取配置

抽象Tasks

@app.task(base=OtherTask):
def add(x, y):
    return x + y

from celery import Task

class DebugTask(Task):

    def __call__(self, *args, **kwargs):
        print('TASK STARTING: {0.name}[{0.request.id}]'.format(self))
        return super(DebugTask, self).__call__(*args, **kwargs)
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末契讲,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子滑频,更是在濱河造成了極大的恐慌捡偏,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,546評(píng)論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件峡迷,死亡現(xiàn)場(chǎng)離奇詭異银伟,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)绘搞,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,224評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén)彤避,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人夯辖,你說(shuō)我怎么就攤上這事琉预。” “怎么了蒿褂?”我有些...
    開(kāi)封第一講書(shū)人閱讀 164,911評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵圆米,是天一觀的道長(zhǎng)尖阔。 經(jīng)常有香客問(wèn)我,道長(zhǎng)榨咐,這世上最難降的妖魔是什么介却? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,737評(píng)論 1 294
  • 正文 為了忘掉前任,我火速辦了婚禮块茁,結(jié)果婚禮上齿坷,老公的妹妹穿的比我還像新娘。我一直安慰自己数焊,他們只是感情好永淌,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,753評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著佩耳,像睡著了一般遂蛀。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上干厚,一...
    開(kāi)封第一講書(shū)人閱讀 51,598評(píng)論 1 305
  • 那天李滴,我揣著相機(jī)與錄音,去河邊找鬼蛮瞄。 笑死所坯,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的挂捅。 我是一名探鬼主播芹助,決...
    沈念sama閱讀 40,338評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼闲先!你這毒婦竟也來(lái)了状土?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 39,249評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤伺糠,失蹤者是張志新(化名)和其女友劉穎蒙谓,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體退盯,經(jīng)...
    沈念sama閱讀 45,696評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡彼乌,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,888評(píng)論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了渊迁。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片慰照。...
    茶點(diǎn)故事閱讀 40,013評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖琉朽,靈堂內(nèi)的尸體忽然破棺而出毒租,到底是詐尸還是另有隱情,我是刑警寧澤箱叁,帶...
    沈念sama閱讀 35,731評(píng)論 5 346
  • 正文 年R本政府宣布墅垮,位于F島的核電站惕医,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏算色。R本人自食惡果不足惜抬伺,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,348評(píng)論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望灾梦。 院中可真熱鬧峡钓,春花似錦、人聲如沸若河。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,929評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)萧福。三九已至拉鹃,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間鲫忍,已是汗流浹背膏燕。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,048評(píng)論 1 270
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留饲窿,地道東北人煌寇。 一個(gè)月前我還...
    沈念sama閱讀 48,203評(píng)論 3 370
  • 正文 我出身青樓焕蹄,卻偏偏與公主長(zhǎng)得像逾雄,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子腻脏,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,960評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開(kāi)發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見(jiàn)模式的工具(例如配置管理鸦泳,服務(wù)發(fā)現(xiàn),斷路器永品,智...
    卡卡羅2017閱讀 134,657評(píng)論 18 139
  • 在學(xué)習(xí)Celery之前做鹰,我先簡(jiǎn)單的去了解了一下什么是生產(chǎn)者消費(fèi)者模式。 生產(chǎn)者消費(fèi)者模式 在實(shí)際的軟件開(kāi)發(fā)過(guò)程中鼎姐,...
    c2db9ba35639閱讀 3,530評(píng)論 0 8
  • 1.定義: Celery是一個(gè)異步的任務(wù)隊(duì)列(也叫做分布式任務(wù)隊(duì)列) 2.工作結(jié)構(gòu) Celery分為3個(gè)部...
    四號(hào)公園_2016閱讀 28,732評(píng)論 5 60
  • Spring Boot 參考指南 介紹 轉(zhuǎn)載自:https://www.gitbook.com/book/qbgb...
    毛宇鵬閱讀 46,822評(píng)論 6 342
  • 這幾天,小編開(kāi)始重溫《還珠格格》献宫,發(fā)現(xiàn)里面的人物真的是水靈钥平,水靈靈的小燕子、水靈靈的紫薇姊途、水靈靈的三個(gè)臭皮匠…… ...
    瘋二傻閱讀 5,137評(píng)論 0 0