减少芹菜排队的积压

2024-09-29 23:27:23 发布

您现在位置:Python中文网/ 问答频道 /正文

我正在使用一个带有Redis的DockedCellery 4.2作为代理和后端,处理来自Twitter流的数据

有时会出现中断,导致任务在队列中堆积。即使有足够的处理能力(内存/CPU),芹菜似乎也无法在中断修复和服务重启后减少积压

有没有办法改变芹菜的这种行为?这种行为的可能原因是IO中的瓶颈(例如读/写Redis?)。欢迎任何形式的输入


Tags: 数据内存ioredis代理队列原因twitter

热门问题