我在我的Django项目中使用了芹菜(Celery==4.0.2)。问题是我不能让芹菜登录到文件中。我什么都试过了。唯一有效的方法是在命令中指定文件:
celery worker -A realestate_scanner -l info --purge --logfile=logs/celery.log
但问题是,日志可能变得非常巨大,所以我需要指定一个旋转的记录器,我想在生产中运行worker and beat作为一个deamons。在
房地产扫描仪/芹菜.py
^{pr2}$房地产扫描仪/设置.py ... 在
INSTALLED_APPS = [
'django.contrib.admin',
'django.contrib.auth',
'django.contrib.contenttypes',
'django.contrib.sessions',
'django.contrib.messages',
'django.contrib.staticfiles',
'django_extensions',
'djmoney',
'storage',
'engineapp',
'presentation',
'import_export'
]
BROKER_URL = 'redis://localhost:6379'
CELERY_RESULT_BACKEND = 'redis://localhost:6379'
CELERY_ACCEPT_CONTENT = ['application/json']
CELERY_TASK_SERIALIZER = 'json'
CELERY_RESULT_SERIALIZER = 'json'
CELERY_TIMEZONE = 'Europe/Bratislava'
CELERY_LOG_FILE = 'test.log' # Not working
worker_log_file = 'test.log' # Not working
worker_hijack_root_logger = False
LOGGING = { # Not working
'version': 1,
'disable_existing_loggers': True,
'formatters': {
'simple': {
'format': '%(levelname)s %(message)s',
'datefmt': '%y %b %d, %H:%M:%S',
},
},
'handlers': {
'console': {
'level': 'INFO',
'class': 'logging.StreamHandler',
'formatter': 'simple'
},
'celery': {
'level': 'INFO',
'class': 'logging.handlers.RotatingFileHandler',
'filename': 'logs/celery.log',
'formatter': 'simple',
'maxBytes': 1024 * 1024 * 100, # 100 mb
},
'scrapy': {
'level': 'INFO',
'class': 'logging.handlers.TimedRotatingFileHandler',
'filename': os.path.join(BASE_DIR, 'logs/scrapy.log'),
'formatter': 'simple'
}
},
'loggers': {
'celery': {
'handlers': ['celery',],
'level': 'INFO',
},
'scrapy': {
'handlers': ['scrapy'],
'level': 'INFO',
}
},
}
from logging.config import dictConfig
dictConfig(LOGGING)
你有什么建议吗?在
编辑:
根据lapinkoira的回答,我已经将此信号添加到celery.py
文件中:
from __future__ import absolute_import
import os
import logging
from celery import Celery
from django.conf import settings
# set the default Django settings module for the 'celery' program.
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'realestate_scanner.settings')
app = Celery('realestate_scanner')
app.config_from_object('django.conf:settings',)
app.autodiscover_tasks(lambda: settings.INSTALLED_APPS)
import celery.signals
@celery.signals.setup_logging.connect
def on_celery_setup_logging(**kwargs):
logger = logging.getLogger('realestate_scanner.realestate_scanner.celery')
if not logger.handlers:
handler = logging.FileHandler('celery_test_log.log')
formatter = logging.Formatter(logging.BASIC_FORMAT) # you may want to customize this.
handler.setFormatter(formatter)
logger.addHandler(handler)
logger.propagate = False
信号可能起作用,因为创建了celery_test_log.log
文件,但输出再次转到celery控制台。在
我可能没有得到我需要的记录器,但不知道如何得到它。在
mmm看起来像celery dev说celery仍然会配置它自己的日志记录器,并且忽略其他配置,即使您禁用了hijack_root_logger
他建议使用芹菜测井信号:
源https://github.com/celery/celery/issues/3428
我找不到完整的答案,所以这是我的。在
Django
LOGGING
设置:我必须将记录器命名为
celery
才能使其工作。像myapp.celery
这样的名称不起作用。在在
^{pr2}$celery.py
:如果您想在出现错误时向管理员发送电子邮件之类的操作,只需像正常一样添加处理程序。在
相关问题 更多 >
编程相关推荐