Django-celery-beat動(dòng)態(tài)添加周期性任務(wù)實(shí)現(xiàn)過(guò)程解析
前期準(zhǔn)備
1.beat插件安裝
pip3 install django-celery-beat
2.注冊(cè)APP
INSTALLED_APPS = [
....
'django_celery_beat',
]
3.數(shù)據(jù)庫(kù)變更
python3 manage.py migrate django_celery_beat
配置工作
目錄結(jié)構(gòu)請(qǐng)參考://www.dbjr.com.cn/article/200659.htm
1.配置celerypro.py
from __future__ import absolute_import
import os
from celery import Celery
from django.conf import settings
from django.utils import timezone
# set the default Django settings module for the 'celery' program.
# 為celery設(shè)置環(huán)境變量
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'voice_quality_assurance_configure.settings')
# 創(chuàng)建celery app
app = Celery('voice_quality_assurance_configure')
# Using a string here means the worker will not have to
# pickle the object when using Windows.
# 從單獨(dú)的配置模塊中加載配置
app.config_from_object('voice_quality_assurance_configure.celeryconfig')
# 設(shè)置app自動(dòng)加載任務(wù)
app.autodiscover_tasks(lambda: settings.INSTALLED_APPS)
# 解決時(shí)區(qū)問(wèn)題,定時(shí)任務(wù)啟動(dòng)就循環(huán)輸出
app.now = timezone.now
2.配置celeryconfig.py
from __future__ import absolute_import from kombu import Queue from django.conf import settings # 設(shè)置代理人broker CELERY_BROKER_URL = 'redis://127.0.0.1:6379/2' # 指定 Backend CELERY_RESULT_BACKEND = 'redis://127.0.0.1:6379/1' # 指定時(shí)區(qū),默認(rèn)是 UTC CELERY_TIMEZONE='Asia/Shanghai' # celery 序列化與反序列化配置 CELERY_TASK_SERIALIZER = 'pickle' CELERY_RESULT_SERIALIZER = 'pickle' CELERY_ACCEPT_CONTENT = ['pickle', 'json'] CELERY_IGNORE_RESULT = True # celery 的啟動(dòng)工作數(shù)量設(shè)置 CELERY_WORKER_CONCURRENCY = 10 # 任務(wù)預(yù)取功能,會(huì)盡量多拿 n 個(gè),以保證獲取的通訊成本可以壓縮。 CELERYD_PREFETCH_MULTIPLIER = 20 # 有些情況下可以防止死鎖 CELERYD_FORCE_EXECV = True # celery 的 worker 執(zhí)行多少個(gè)任務(wù)后進(jìn)行重啟操作 CELERY_WORKER_MAX_TASKS_PER_CHILD = 100 # 禁用所有速度限制,如果網(wǎng)絡(luò)資源有限,不建議開(kāi)足馬力。 CELERY_DISABLE_RATE_LIMITS = True # celery beat配置(周期性任務(wù)設(shè)置) CELERY_ENABLE_UTC = False CELERY_TIMEZONE = settings.TIME_ZONE DJANGO_CELERY_BEAT_TZ_AWARE = False CELERY_BEAT_SCHEDULER = 'django_celery_beat.schedulers:DatabaseScheduler'
3.分別啟動(dòng)woker和beta
項(xiàng)目根目錄終端執(zhí)行(voice_quality_assurance_configure為項(xiàng)目名稱,簡(jiǎn)單來(lái)說(shuō),和manage.py文件同級(jí))
celery -A voice_quality_assurance_configure beat -l info --scheduler django_celery_beat.schedulers:DatabaseScheduler #
啟動(dòng)beta 調(diào)度器使用數(shù)據(jù)庫(kù)
celery worker -A voice_quality_assurance_configure --loglevel=info -n worker1 #啟動(dòng)celery worker
4.創(chuàng)建周期性任務(wù)
from datetime import datetime, timedelta
import json
import os,django
os.environ.setdefault("DJANGO_SETTINGS_MODULE", "voice_quality_assurance_configure.settings")# project_name 項(xiàng)目名稱
django.setup()
from django_celery_beat.models import PeriodicTask, IntervalSchedule
schedule, created = IntervalSchedule.objects.get_or_create(every=10,period=IntervalSchedule.SECONDS,)
# 帶參數(shù)的創(chuàng)建方法,如下:
PeriodicTask.objects.create(
interval=schedule, # 上面創(chuàng)建10秒的間隔 interval 對(duì)象
name='test_task', # 設(shè)置任務(wù)的name值
task='mission.tasks.my_task', # 指定需要周期性執(zhí)行的任務(wù)
args=json.dumps([10, 2, 76]),
expires=datetime.utcnow() + timedelta(seconds=30)
)
詳解創(chuàng)建周期性任務(wù)的方法
創(chuàng)建基于interval的周期性任務(wù)
第一步創(chuàng)建間隔對(duì)象
schedule, created = IntervalSchedule.objects.get_or_create( every=10, period=IntervalSchedule.SECONDS, )
IntervalSchedule.DAYS 固定間隔天數(shù)
IntervalSchedule.HOURS 固定間隔小時(shí)數(shù)
IntervalSchedule.MINUTES 固定間隔分鐘數(shù)
IntervalSchedule.SECONDS 固定間隔秒數(shù)
IntervalSchedule.MICROSECONDS 固定間隔微秒
第二步創(chuàng)建任務(wù)
無(wú)參數(shù)的創(chuàng)建方法:
PeriodicTask.objects.create( interval=schedule, # we created this above. name='test_task', # simply describes this periodic task. task='app名.tasks.任務(wù)函數(shù)名', # name of task.)
有參數(shù)的創(chuàng)建方法:
PeriodicTask.objects.create(
interval=schedule, # we created this above.
name='test'_task', # simply describes this periodic task.
task='app名.tasks.任務(wù)函數(shù)名', # name of task.
args=json.dumps(['arg1', 'arg2']),
kwargs=json.dumps({ 'be_careful': True, }),
expires=datetime.utcnow() + timedelta(seconds=30) )
class MonitorDeviceTask(object):
"""
設(shè)備創(chuàng)建,增加周期性任務(wù)
"""
def __init__(self, device_obj):
self.device_obj = device_obj
self.periodic_task = PeriodicTask.objects.create(
interval=schedule,
name='test_task',
task='mission.tasks.my_task',
args=json.dumps([self.device_obj.ip])
)
def starttask(self):
"""
啟動(dòng)任務(wù)
"""
self.periodic_task.enabled = True
self.periodic_task.save()
def stoptask(self):
"""
停止任務(wù)
"""
self.periodic_task.enabled = False
self.periodic_task.save()
def deltask(self):
"""
刪除任務(wù)
"""
self.periodic_task.delete()
self.periodic_task.save()
創(chuàng)建基于 crontab 的周期性任務(wù)
from django_celery_beat.models import CrontabSchedule, PeriodicTask
schedule, _ = CrontabSchedule.objects.get_or_create(
minute='30',
hour='*',
day_of_week='*',
day_of_month='*',
month_of_year='*',
timezone=pytz.timezone('Canada/Pacific')
)
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Python實(shí)現(xiàn)文本特征提取的方法詳解
這篇文章主要為大家詳細(xì)介紹了Python實(shí)現(xiàn)提取四種不同文本特征的方法,有字典文本特征提取、英文文本特征提取、中文文本特征提取和TF-IDF 文本特征提取,感興趣的可以了解一下2022-08-08
numpy數(shù)組的重塑和轉(zhuǎn)置實(shí)現(xiàn)
本文主要介紹了numpy數(shù)組的重塑和轉(zhuǎn)置實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03
基于python實(shí)現(xiàn)監(jiān)聽(tīng)Rabbitmq系統(tǒng)日志代碼示例
這篇文章主要介紹了基于python實(shí)現(xiàn)監(jiān)聽(tīng)Rabbitmq系統(tǒng)日志代碼示例,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-11-11
在python中實(shí)現(xiàn)求輸出1-3+5-7+9-......101的和
這篇文章主要介紹了在python中實(shí)現(xiàn)求輸出1-3+5-7+9-......101的和,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-04-04
從零學(xué)python系列之淺談pickle模塊封裝和拆封數(shù)據(jù)對(duì)象的方法
這個(gè)系列也發(fā)了幾篇文章了,都是個(gè)人的一些學(xué)習(xí)心得的記錄,今天在學(xué)習(xí)文件數(shù)據(jù)處理的時(shí)候了解到有pickle模塊,查找官方文檔學(xué)習(xí)了一些需要用到的pickle內(nèi)容。2014-05-05
詳解python中TCP協(xié)議中的粘包問(wèn)題
這篇文章主要介紹了python中TCP協(xié)議中的粘包問(wèn)題,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-03-03
Python的Flask框架標(biāo)配模板引擎Jinja2的使用教程
Jinja2是Python世界的一款高人氣template engine,是許多開(kāi)源Web框架的選擇,包括Flask這樣的明星級(jí)項(xiàng)目,這里我們就來(lái)共同學(xué)習(xí)Python的Flask框架標(biāo)配模板引擎Jinja2的使用教程2016-07-07
Python?GUI利用tkinter皮膚ttkbootstrap實(shí)現(xiàn)好看的窗口
這篇文章主要介紹了Python?GUI利用tkinter皮膚ttkbootstrap實(shí)現(xiàn)好看的窗口,文章基于python的相關(guān)資料展開(kāi)詳細(xì)的內(nèi)容介紹,具有一定的參考價(jià)值,感興趣的小伙伴可以參考一下2022-06-06

