python - celery beat 調度如何運行期間動態(tài)添加任務?
問題描述
我嘗試過django-celery-beat,在admin后臺添加任務,可以實現(xiàn)動態(tài)添加任務但要重啟celery beat才生效,請問,有其他方試嗎?
問題解答
回答1:無法動態(tài)添加,必須重啟 beat。
ask 回答過原因了 #3493
回答2:有個思路,你可以考慮,我目前也在嘗試這個方法,處于摸石過河階段。celery是支持定時任務,但是不符合我的需求,我需要像linux下的crontab這樣動態(tài)添加定時任務,我也看了django-celery-beat,因為用的是Flask,發(fā)現(xiàn)不值得參考實現(xiàn),所以一直在看文檔搜資料,終于被我找到一種方式,celery的apply_async這個函數(shù)非常有用,它有個eta參數(shù),它的簡化使用是countdown,但是eta的威力是很巨大的,因為它只接受datetime對象,比如你給定一個任務在2017-05-02 20:0:0執(zhí)行,你可以這樣使用:
job.apply_async(args=args, kwarg=kwargs, eta=datetime(2017,5,2,20,0,0))
是不是很少用,假如我有一個任務需要每天晚上八點執(zhí)行,我可以利用這個eta參數(shù)實現(xiàn)。偽代碼如下:
時間規(guī)則 = ’每天晚上八點執(zhí)行’第一次調用任務,先計算最近的執(zhí)行時間,作為eta的參數(shù),調用apply_async函數(shù),然后第一次任務執(zhí)行成功,得到上次任務的eta參數(shù)值,在天的值上加一,然后把新的執(zhí)行時間作為eta的參數(shù)再次調用apply_async函數(shù),這里省略了很多判斷,自行腦補。循環(huán)往復,是不是一直按每天晚上八點執(zhí)行。
這里有個非常重要的點是如何在任務執(zhí)行成功的時候計算下一次的執(zhí)行時間,做法如下
class MyTask(Task): def on_success(self, retval, task_id, args, kwargs):print ’task done: {0}’.format(retval)return super(MyTask, self).on_success(retval, task_id, args, kwargs) def on_failure(self, exc, task_id, args, kwargs, einfo):print ’task fail, reason: {0}’.format(exc)return super(MyTask, self).on_failure(exc, task_id, args, kwargs, einfo)@app.task(base=MyTask)def add(x, y): return x + y
它提供了任務執(zhí)行成功和失敗的函數(shù),我們只要在此基礎上重寫就可以了,我說的只是最核心的部分,具體怎么做有很多方法,
相關文章:
1. angular.js - angular內(nèi)容過長展開收起效果2. 關于nginx location配置的問題,root到底是什么3. angular.js - angularjs的自定義過濾器如何給文字加顏色?4. docker鏡像push報錯5. 關于docker下的nginx壓力測試6. 大家好,請問在python腳本中怎么用virtualenv激活指定的環(huán)境?7. 并發(fā)模型 - python將進程池放在裝飾器里為什么不生效也沒報錯8. python的前景到底有大?如果不考慮數(shù)據(jù)挖掘,機器學習這塊?9. python 怎樣用pickle保存類的實例?10. python2安裝失敗
