R
Size: a a a
2019 October 25
АП
LOG_ENABLED = True
LOG_LEVEL = 'INFO'
LOG_LEVEL = 'INFO'
Не помогло.
B
может у тебя где-то в проекте или миделваре есть что-то типа:
@classmethod
def update_settings(cls, settings):
АП
@app.task
def scrap(account_names: list):
settings = get_project_settings()
settings["LOG_LEVEL"] = "INFO"
settings["LOG_ENABLED"] = True
process = CrawlerProcess(settings)
process.crawl(MySpider, "v", "vv", account_names)
process.start()
B
2019-10-25 21:30:50 [scrapy.crawler] INFO: Overridden settings: {'BOT_NAME': 'just_scrapy3', 'LOG_LEVEL': 'INFO', 'NEWSPIDER_MODULE': 'just_scrapy3.spiders', 'ROBOTSTXT_OBEY': True, 'SPIDER_MODULES': ['just_scrapy3.spiders']}АП
может у тебя где-то в проекте или миделваре есть что-то типа:
@classmethod
def update_settings(cls, settings):
Нету.
АП
2019-10-25 21:30:50 [scrapy.crawler] INFO: Overridden settings: {'BOT_NAME': 'just_scrapy3', 'LOG_LEVEL': 'INFO', 'NEWSPIDER_MODULE': 'just_scrapy3.spiders', 'ROBOTSTXT_OBEY': True, 'SPIDER_MODULES': ['just_scrapy3.spiders']}Такое и у меня есть, и всё равно итемы идут в консоль почему то.
B
а посмотри что указано в
process.settings.attributesАП
Это до вызова краулера?
АП
Вернее до старта процесса?
B
да
АП
from scrapy.utils.log import configure_logging
Делал, не помогало.
АП
Помог только хак с мутацией глобальных дефолтных значений.
АП
'LOG_LEVEL': <SettingsAttribute value='INFO' priority=20>АП
Обидно.