web-dev-qa-db-fra.com

Enregistrer la tâche basée sur la classe de céleri

Python 3.x, Céleri 4.x ...

J'ai une tâche de classe.

myproj/celery.py

from celery import Celery

# Django settings stuff...

app = Celery('myproj')
app.autodiscover_tasks()

app1/tasks.py

import celery

class EmailTask(celery.Task):
    def run(self, *args, **kwargs):
        self.do_something()

Si je fais:

$ celery worker -A myproj -l info
[tasks]
  . app2.tasks.debug_task
  . app2.tasks.test

Les décorateurs de céleri travaillent donc pour enregistrer les tâches, mais la tâche basée sur la classe n'est pas enregistrée.

Comment puis-je enregistrer les tâches basées sur la classe?

Mise à jour 1:

Si j'ajoute les lignes suivantes à app1/tasks.py

from myproj.celery import app
email_task = app.tasks[EmailTask.name]

.

$ celery worker -A myproj -l info
  File "myproj/app1/tasks.py", line 405, in <module>
    email_task = app.tasks[EmailTask.name]
  File "/usr/local/lib/python3.5/site-packages/celery/app/registry.py", line 19, in __missing__
    raise self.NotRegistered(key)
celery.exceptions.NotRegistered

Mise à jour 2:

Je peux exécuter ma tâche de manière synchrone (run) via un wrapper. Toutefois, je ne peux pas exécuter la tâche de manière asynchrone, c’est-à-dire via delay.

app1/tasks.py

@app.task
def email_task():
    """
    Wrapper to call class based task
    """
    task = EmailTask()
    # task.delay()  # Won't work!!!
    task.run()

.

$./manage.py Shell
> from app1.tasks import EmailTask
> task1 = EmailTask()
> task1.run() # a-okay
> task2 = EmailTask()
> task2.delay() # nope
  <AsyncResult: 1c03bad9-169a-4a4e-a56f-7d83892e8bbc>

# And on the worker...
[2017-01-22 08:07:28,120: INFO/PoolWorker-1] Task app1.tasks.email_task[41e5bc7d-058a-400e-9f73-c853c0f60a2a] succeeded in 0.0701281649817247s: None
[2017-01-22 08:10:31,909: ERROR/MainProcess] Received unregistered task of type None.
The message has been ignored and discarded.
pythonpython-3.xcelery
8
James

Vous pouvez trouver la description complète ici , mais pour moi il suffisait d’ajouter

from myapp.celery import app
app.tasks.register(MyTaskTask())
10
Oleksandr Dashkov

Avec celery==4.2.1, je devais utiliser la valeur de retour de Celery.register_task() comme instance de tâche pour appeler delay() sur:

# my_app/tasks.py
import celery

from my_app.celery import app

class MyTask(celery.Task):
    def run(self):
        [...]

MyTask = app.register_task(MyTask())

Puis l'utiliser:

# my_app/app.py
from my_app.tasks import MyTask

[...]

MyTask.delay()

La solution a été décrite dans un problème - de Github et est documentée ici .

Hth, Dtk

3
dtk