在组的子任务之间添加延迟

Question

我正在创建一个 Celery 组来并行执行一堆进程。以下是代码 -

@periodic_task(run_every=timedelta(minutes=1))
def schedule_pivots():
    today_list="A,B,C,D"
    g = group(get_pivots.s(l,'OPT') for l in today_list.split(','))
    g.set(countdown=100).delay()

"get_pivots"是称为并行的任务。此任务调用外部 API，如果在 500 毫秒内调用，则会限制速率。有没有办法让我在每次执行任务"get_pivots"之间引入延迟？

Answer 1

刚刚测试了这个

@celery.task(rate_limit='10/m')
def add(x, y):
    return x + y

从 python 解释器调用此任务时

>>> g = group(add.s(i, i + 1) for i in range(10))
>>> r = g()
>>> r.get()

最后一部分冻结，直到一切都完成，希望有帮助