celery worker 正常运行,但不消费任务,试了很多办法,解决不了。

wuwukai007 · 2022-04-29T11:44:52Z

celery worker 接收定时任务，worker 隔段时间就不消费了，任务主要是 django client 模拟访问设置了任务超时时间 time_limit 和 redis socket_timeout 没有用参考了这个文章 https://ayushshanker.com/celery-long-post/ 没有什么头绪。 worker 不打日志，进程存在，没有任何日志，beat 一直发任务，worker 没有反应

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

This topic created in 1462 days ago, the information mentioned may be changed or developed.

celery worker 接收定时任务，worker 隔段时间就不消费了，任务主要是 django client 模拟访问
设置了任务超时时间 time_limit 和 redis socket_timeout 没有用
参考了这个文章 https://ayushshanker.com/celery-long-post/ 没有什么头绪。 worker 不打日志，进程存在，没有任何日志，beat 一直发任务，worker 没有反应

Worker

Celery

任务

time_limit

3 replies • 2022-05-05 13:47:40 +08:00

Apr 29, 2022 via iPhone

你不看日志吗？

cz5424

Apr 29, 2022 via iPhone

一般是任务里写了死循环

julyclyde

May 5, 2022

以前我是在函数各处写日志，把这个任务的 id 、执行到某个步骤、耗费的时间记录下来

最后发现是在函数里访问 redis 的时候遭遇了 zset 性能问题……