我有一个 Celery 任务,例如:
from celery.task import task
from django.conf import settings
from base.tasks import BaseTask
@task(name="throw_exception", base=BaseTask)
def print_value(*args, **kwargs):
print('BROKER_URL:', settings.BROKER_URL)
我在我的 virtualenv 中运行一个 Celery worker,比如:
celery worker -A myproject -l info
worker 显示:
Connected to amqp://guest:**@127.0.0.1:5672/myapp
当我从 Django shell 启动我的任务时:
>>> from django.conf import settings
>>> settings.BROKER_URL
'amqp://guest:**@127.0.0.1:5672/myapp'
>>> from myapp.tasks import print_value
>>> print_value.delay()
我从未在工作人员的日志中看到执行过的任务。
但是,如果我改为使用带有默认“/”虚拟主机的 BROKER_URL,那么它会立即执行所有待处理的任务,这意味着我对 print_value.delay() 的所有调用都是即使设置了正确的 BROKER_URL,也会将其发送到错误的虚拟主机。我做错了什么?
编辑:问题似乎是 Celery 没有一致的 @task 装饰器,并且通过使用错误的装饰器,您会断开任务与代理设置的连接。所以基本上,我的所有任务都配置为使用默认代理,而不是我的设置中定义的代理。旧文档说要使用 from celery.task import task 但新文档...并没有真正指定,似乎暗示你应该使用定义的 app 实例在你的 celery.py 文件中,比如 @app.task。这个问题是我所有的任务都在单独的 tasks.py 文件中,它们无法访问 app 实例。如果我将任务复制到我的 celery.py 并使用 @app.task 装饰器,那么它会使用正确的虚拟主机并按预期工作,但很明显,这不是这不是一个实用的修复方法,因为我必须将许多函数复制到这个文件中。我该如何正确解决这个问题?
请您参考如下方法:
我现在正在使用 Django + (Celery + RabbitMQ) 来问自己同样的问题。我的解决方案是,
CELERY_BROKER_URL=amqp://<user>:<password>@localhost:5672/<vhost>
这是来自 RabbitMQ.com > Client Documentation > RabbitMQ URI Specification 的详细确认
物有所值...
...Celery + RabbitMQ 发生了很多事情。我正在用 rabbitmqctl list_vhosts 查看 RabbitMQ -- 而且我没有看到我的虚拟主机。 WTF? 最后,我意识到我配置了 supervisord在我的本地开发服务器上还为时过早。从 CLI 启动 Celery 会给出一堆反馈 supervisord放在不直接在我 Nose 底下的某个地方,比如:
[2021-02-19 18:26:52,803: WARNING/MainProcess] (0, 0): (403) ACCESS_REFUSED - Login was refused using authentication mechanism AMQPLAIN. For details see the broker logfile.
AMQP立即让我想起了连接字符串。繁荣。这是你的 vhost .
