当前位置: 首页 > 面试题库 >

celery的回调apply_async

朱炳
2023-03-14
问题内容

celery应用程序中使用它来运行定期任务。让我们看下面的简单例子

from myqueue import Queue
@perodic_task(run_every=timedelta(minutes=1))
def process_queue():
    queue = Queue()
    uid, questions = queue.pop()
    if uid is None:
        return

    job = group(do_stuff(q) for q in questions)
    job.apply_async()

def do_stuff(question):
    try:
        ...
    except:
        ...
        raise

正如你可以在上面的例子中看到的,我使用celery到异步任务运行,但(因为它是一个队列)我需要做的queue.fail(uid)异常的情况下,do_stuffqueue.ack(uid)以其他方式。在这种情况下,在-on_failure和两种情况下从我的任务中进行一些回调将是非常清楚和有用的on_success

我看到了一些文档,但从未见过将回调与配合使用的做法apply_async。有可能这样做吗?


问题答案:

子类Task类并重载on_success和on_failure函数:

class CallbackTask(Task):
    def on_success(self, retval, task_id, args, kwargs):
        pass

    def on_failure(self, exc, task_id, args, kwargs, einfo):
        pass


@celery.task(base=CallbackTask)  # this does the trick
def add(x, y):
    return x + y


 类似资料:
  • Celery 是一个简单,灵活且可靠的分布式系统,可以处理大量消息,同时为操作提供维护该系统所需的工具。这是一个任务队列,着重于实时处理,同时还支持任务调度。 Celery 通过消息进行通信,通常使用经纪人在 clients 和 workers 之间进行调解。要启动一个任务,客户端会在队列中放入一条消息,然后经纪人将消息传递给工人。 一个Celery系统可以由多个worker和broker组成,从

  • 问题内容: 按照此处找到的说明,我将脚本从github复制到 /etc/init.d/celeryd中 ,然后使其可执行; 我按照说明创建了配置文件 / etc / default / celeryd : 注意 :我在CELERYD_OPTS中添加了 --config = celeryconfig 部分。 我创建了一个新的用户 celery 与 然后创建集体 celery 并向其中添加用户: 我将

  • 问题内容: 我正在使用celery将任务发送到远程服务器,并试图将结果恢复。使用远程服务器上的update_state方法不断更新任务状态。 我正在使用发送任务 获得celery任务的结果是一个阻塞的呼叫,我不希望我的django应用程序等待结果和超时。 所以我尝试运行另一个celery任务以获取结果。 但这会导致以下错误。 有没有解决此错误的方法。是否需要运行守护进程来获取结果? 问题答案: 使

  • 问题内容: 按照此处找到的说明,我将脚本从github复制到 /etc/init.d/celeryd中 ,然后使其可执行; 我按照说明创建了配置文件 / etc / default / celeryd : 注意 :我在CELERYD_OPTS中添加了 --config = celeryconfig 部分。 我创建了一个新的用户 芹菜 与 然后创建集体 芹菜 并向其中添加用户: 我将chown ce

  • ​支付助手 - 是一个基于微信支付API、支付宝支付API封装的Spring Boot Stater。通过简单注解配置即可进行支付交易。 主要特性 简单注解配置,即可实现支付相关操作 省掉碍眼繁琐的签名与验签,简化支付交互过程 透传返回交互结果 使用指引 引入依赖 implementation("cool.doudou:pay-assistant:latest") 配置文件 pay: modes

  • File 助手 - 是一个自研实现的Spring Boot Stater。结合多种文件存储平台实现文件上传、下载、预览。 主要特性 基于成熟包扩展,没有任何框架变动,只为简化开发使用 配置简单灵活,无需复杂的配置文件:开发者配置模式后,统一方法实现上传、下载、预览 使用指引 引入依赖 implementation("cool.doudou:file-assistant:latest") 使用方式