如何在每个任务都有单独队列的情况下运行芹菜节拍?



我有一个包含多个芹菜节拍任务的Django 项目,当我有多个带有单个队列的芹菜节拍任务时,我遇到了问题,所以我是否有可能一次运行所有这些,运行这些的最佳实践是什么?

from __future__ import absolute_import, unicode_literals
import os
from celery import Celery
from celery import Celery
from celery.schedules import crontab
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'projectDemon.settings')
app = Celery('projectDemon')
app.config_from_object('django.conf:settings', namespace='CELERY')
app.autodiscover_tasks()
@app.on_after_configure.connect
def setup_periodic_tasks(sender, **kwargs):
sender.add_periodic_task(
crontab(minute=30, hour='7'),
task1.s('Checking task1 !'),
queue= 'task1',
options={
'queue': 'task1',
'routing_key': 'task1'}
)
sender.add_periodic_task(
crontab(minute=00, hour='6'),
task2.s('Checking task2 !'),
queue= 'task2',
options={
'queue': 'task2',
'routing_key': 'task2'}
)
sender.add_periodic_task(
crontab(
minute='*/1',  # run every minute
),
task3.s('Checking task3 !'),
queue= 'task3',
options={
'queue': 'task3',
'routing_key': 'task3'}
)
@app.task
def task1(arg):
print(arg)
@app.task
def task2(arg):
print(arg)
@app.task
def task3(arg):
print(arg)

我处理这个问题的方式是通过定义task_routes来定义将使用特定队列的每个任务。我有一些任务总是会使用特定的队列,无论是从整个应用程序触发还是通过芹菜节拍触发。(请注意,您未在任务路由中定义的任何任务都将使用默认队列(。

从那里,我简单地将芹菜节拍定义为调度程序来调用特定任务(不将队列作为变量传递(。

我对这个解决方案没有任何问题,但如果你解释你的具体问题,我可能会更好地提供帮助。

相关内容

  • 没有找到相关文章

最新更新