Всем здравствуйте! Недавно начал работать со scrapy, мне пришлось создать свой собственный download middleware, который запрашивает хром через cdp протокол. Он возвращает HTMLResponse объект в process_request (значит, процессинг оставливается на этом этапе). Middleware хорошо работает, но когда использую его в CrawlSpider c rules, повторные вызовы больше не выполняются 🤔 Без этого middleware выполняются. Наверное что-то неправильно понял, помощь нужна)