Celery 结果错误“args 必须是列表或元组”
Posted
技术标签:
【中文标题】Celery 结果错误“args 必须是列表或元组”【英文标题】:Celery Result error "args must be a list or tuple" 【发布时间】:2014-08-07 22:33:58 【问题描述】:我正在运行一个 Django 网站,并且刚刚让 Celery 运行,但我遇到了令人困惑的错误。以下是代码的结构。
在tests.py中:
from tasks import *
from celery.result import AsyncResult
project = Project.objects.create()
# initalize various sub-objects of the project
c = function.delay(project.id)
r = AsyncResult(c.id).ready()
f = AsyncResult(c.id).failed()
# wait until the task is done
while not r and not f:
r = AsyncResult(c.id).ready()
f = AsyncResult(c.id).failed()
self.assertEqual() #will fail because task fails
在tasks.py中:
from __future__ import absolute_import
from celery import shared_task
@shared_task
def function(project_id)
#a bunch of calculations followed by a save of the project
project = Project.objects.get(project=project_id)
for part in project.part_set.all():
partFunction(part.id)
p = Part.objects.get(id=part.id)
# add to various variables in project from variables in p
project.save()
在 mainapp/settings.py 中:
BROKER_URL = "amqp://ipaddress"
CELERY_RESULT_BACKEND='amqp'
CELERY_ACCEPT_CONTENT = ['json','pickle','msgpack','yaml']
CELERY_IGNORE_RESULT = False
必须按列表/元组的 celery 调试控制台日志:
[INFO/MainProcess] Received task: myapp.tasks.function[id]
[ERROR/MainProcess] Task myapp.tasks.function[id]
raised unexpected: ValueError('task args must be a list or tuple',)
Traceback:
File "/python2.7/site-packages/celery/app/trace.py", line 240, in trace_task
R = retval = fun(*args, **kwargs)
File "/python2.7/site-packages/celery/app/trace.py", line 437, in __protected_call__
return self.run(*args, **kwargs)
File "/myapp/tasks.py", line 28, in function
p = Part.objects.get(id=part.id)
File "/python2.7/site-packages/celery/app/task.py", line 555, in apply_async
**dict(self._get_exec_options(), **options)
File "/python2.7/site-packages/celery/app/base.py", line 351, in send_task
reply_to=reply_to or self.oid, **options
File "celery/app/amqp.py", line 252, in publish_task
raise ValueError('task args must be a list or tuple')
ValueError: task args must be a list or tuple
我得到的错误如上,AsyncResult(c.id).result: task args must be a list or tuple
。这应该是一个简单的解决方案,但事实并非如此。当我把它列成这样的列表时:
inline = [project.id]
c = function.delay(inline)
然后它改变主意并告诉我AsyncResult(c.id).result: int() argument must be a string or a number, not 'list'
你可以想象我很困惑可能是什么问题。
编辑
tasks.py
@shared_task
def function(app):
@app.task(name='myapp.function', bind=True)
def function(project_id):
tests.py
c = function.s(project.id).delay()
function.app 打印
【问题讨论】:
你能再分享一些代码吗? @RafaelBarros 我不能分享更多的任务代码,但这不重要,因为我得到了相同的结果,过程什么都不做。如果有帮助,我可以添加一些设置和测试功能的更多部分。 如果您可以发送至少几行“函数”,也许还有完整的堆栈跟踪,那会有所帮助。 @RafaelBarros 如果您对任何路径感到困惑,请告诉我,因为为了空间和易读性,我已将它们压缩。 你可以试试function.delay(*inline)吗? 【参考方案1】:您在任务中的代码中遇到错误,它显示在回溯中:
File "/myapp/tasks.py", line 28, in function
p = Part.objects.get(id=part.id)
您的代码看起来是正确的,但从追溯来看,celery 似乎有一个旧版本的任务腌制。 非常重要,每当您更改 task.py
中的任何内容时都重新启动 celery(也许即使您更改了其他文件,但我不这么认为)。这可能是你的问题的原因,它咬了我几次。
也没有理由从数据库中单独提取part
p = Part.objects.get(id=part.id)
,因为当您在for part in project.part_set.all():
中迭代查询集时,您已经获得了当前零件实例。这只是一个建议,您可能有更多需要该步骤的代码。
附带说明,如果它是您项目中的一项任务,而不是某些可重用应用程序的一部分,只需使用常规的 @task
装饰器,celery 会找到它,但请确保您正确配置 Celery
应用程序,这是我的另一篇可以指导您完成的帖子:Celery / Django Single Tasks being run multiple times
只要你把所有的东西都配置好了,就可以像以前一样使用它:
@task #or @shared_task
def function(project_id)
#a bunch of calculations followed by a save of the project
project = Project.objects.get(project=project_id)
....
然后调用它:
result = function.delay(project.id)
或:
result = function.apply_async(args=(project.id,))
显然,我还建议通过不使用 celery function(project.id)
直接调用它来测试任务,但我相信你知道这一点。
【讨论】:
谢谢,问题不在于我仍然拥有的代码,因为那是正确的,但 celery 认为我使用的是旧版本的 tasks.py以上是关于Celery 结果错误“args 必须是列表或元组”的主要内容,如果未能解决你的问题,请参考以下文章
如何在任务中获取芹菜结果模型(使用 django-celery-results)
在 Django 中使用 Celery 设置结果后端(rpc)