web-dev-qa-db-fra.com

difficulté à configurer les tâches de céleri en arrière-plan en Python

J'ai suivi toutes les étapes données dans [ http://docs.celeryproject.org/en/latest/getting-started/first-steps-with-celery.html ].

from __future__ import absolute_import
from celery import Celery

#app = Celery('tasks', broker='pyamqp://guest@localhost//')
app = Celery('tasks', backend='redis://localhost', broker='pyamqp://guest@localhost//')
@app.task
def add(x, y):
   return x + y

Quand j'exécute le travail du céleri à l'aide de la commande suivante 

celery -A tasks worker --loglevel=info

Je reçois une erreur de syntaxe lors de la configuration du backend. C'est le message d'erreur:

[2018-07-10 16:37:21,970: CRITICAL/MainProcess] Unrecoverable error: SyntaxError('invalid syntax', ('c:\\users\\user_\\appdata\\local\\programs\\python\\python37-32\\lib\\site-packages\\celery\\backends\\redis.py', 22, 19, 'from . import async, base\n'))Traceback (most recent call last):  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\kombu\utils\objects.py", line 42, in __get__    return obj.__dict__[self.__name__] KeyError: 'backend' During handling of the above exception, another exception occurred: Traceback (most recent call last):  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\worker\worker.py", line 205, in start self.blueprint.start(self)  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\bootsteps.py", line 115, in start self.on_start() File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\apps\worker.py", line 139, in on_start    self.emit_banner()  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\apps\worker.py", line 154, in emit_banner    ' \n', self.startup_info(artlines=not use_image))), File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\apps\worker.py", line 217, in startup_info    results=self.app.backend.as_uri(), File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\kombu\utils\objects.py", line 44, in __get__    value = obj.__dict__[self.__name__] = self.__get(obj) File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\app\base.py", line 1196, in backend    return self._get_backend()  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\app\base.py", line 914, in _get_backend    self.loader)  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\app\backends.py", line 70, in by_url    return by_name(backend, loader), url  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\app\backends.py", line 50, in by_name    cls = symbol_by_name(backend, aliases)  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\kombu\utils\imports.py", line 56, in symbol_by_name    module = imp(module_name, package=package, **kwargs)  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\importlib\__init__.py", line 127, in import_module    return _bootstrap._gcd_import(name[level:], package, level)  File "<frozen importlib._bootstrap>", line 1006, in _gcd_import  File "<frozen importlib._bootstrap>", line 983, in _find_and_load  File "<frozen importlib._bootstrap>", line 967, in _find_and_load_unlocked  File "<frozen importlib._bootstrap>", line 677, in _load_unlocked  File "<frozen importlib._bootstrap_external>", line 724, in exec_module  File "<frozen importlib._bootstrap_external>", line 860, in get_code  File "<frozen importlib._bootstrap_external>", line 791, in source_to_code  File "<frozen importlib._bootstrap>", line 219, in _call_with_frames_removed  File "c:\users\user_\appdata\local\programs\python\python37-32\lib\site-packages\celery\backends\redis.py", line 22    from . import async, base                      ^ SyntaxError: invalid syntax

Cependant, lorsque j'utilise la ligne commentée, je n'ai aucun problème, mais le système de résultats est désactivé et je dois définir le système de résultats sur Redis-Server.

pythonpython-3.xredisceleryredis-server
6
Ai Da

J'ai résolu le problème. La principale cause du problème était que j'utilisais Python 3.7. Mais, à ma connaissance, Celery fonctionne actuellement avec Python 3.6 et versions antérieures. J'ai apporté les modifications suivantes au code de céleri:

  1. Renommé "C:\Utilisateurs\myusername\AppData\Local\Programmes\Python\Python37-32\Lib\sites-packages\celery\backends\async.py" en "C:\Utilisateurs\myusername\AppData\Local\Programmes\Python\Python37-32\Lib\site-packages\celery\backends\asynchronous.py "

  2. Redis.py ouvert et a changé chaque ligne qui avait le mot-clé "async" à "asynchrone".

Apparemment, 

async

est maintenant un mot clé dans Python 3.

Vous pouvez également lire ce lien: https://github.com/celery/celery/issues/4500

Espérons que cette réponse aidera tous ceux qui ont le même problème jusqu'à ce qu'une nouvelle version de Celery soit publiée.

UPDATE: C'est le numéro de Python 3.7. Vous pouvez utiliser Python 3.6 à la place sans ce problème. Toutefois, si vous souhaitez continuer à utiliser Python 3.7 et céleri [redis], vous pouvez utiliser la solution ci-dessus pour résoudre le problème.

13
Ai Da

support @Ai Da, et vous devriez maintenir AsyncBackendMixin dans redis.py.

1
xiaopo

Avez-vous essayé d'ajouter le port et la base de données redis dans le paramètre backend?

0
yugantar