python之celery簡單使用
阿新 • • 發佈:2019-02-14
celery是一個簡單、靈活和可靠的分散式任務處理系統。專注實時任務佇列,也支援任務排程。
一、celery主要包括四個部分
1、任務排程者,
2、中介軟體,傳遞任務 broker(常用的有redis、rabbitmq)
3、任務執行者(work)
4、結果儲存 backend(儲存執行完成的結果,告知任務排程者)
二、建立一個task, task.py
import celery app = celery.Celery('tasks', broker='redis://localhost:6379') @app.task def first(): print "hello world"這樣就寫了一個任務的排程,接下來啟動任務: celery -A task worker --loglevel=info
-A 後面python檔名, work表示啟動一個子程序
三、呼叫此任務
from test1 import first first.delay() first.apply_async()delay和apply_async(非同步)是兩種呼叫方式;
看work程序就會答應下面的日誌,說明呼叫成功
2018-02-04 14:16:06,792: WARNING/ForkPoolWorker-4] hello world
四、celery配置設定
之前的例子是在celery初始化的時候設定,celery有許多配置
app = celery.Celery('tasks', broker='redis://localhost:6379')
設定時區
app.conf.CELERY_TIMEZONE = 'Europe/London'
如果這樣設定的話,會很麻煩,celery支援從檔案進行設定
app.config_from_object()
例如task.py
import celery from myceleryconfig import myconfig app = celery.Celery() print myconfig.BROKER_URL app.config_from_object(myconfig) @app.taskmyceleryconfig.pydef add(x, y): return x + y
class myconfig(): BROKER_URL = 'redis://localhost:6379'
所有的celery設定都可以放在myceleryconfig.py裡面
具體設定哪些值,可以檢視celery.app.utils