AR
я уже написал, что пайплайн пишет не синхронно...
Size: a a a
2020 January 13
AR
если посмотреть внимательно на пайплайн, в нём обнаружится функция, которая вызывается по разу на итем
AR
и нет, она вызывается не когда паук завершается
AR
откуда при асинхронности потеря данных это тоже вопрос
AR
будет
AR
ну т.е. не будет, вообще говоря, т.к. этот кусок выполняется синхронно
AR
но делать так не стоит
AR
и смысла 0, и механизмы получше уже есть, и развалится если внутри появится перевод управления
AR
и с точки зрения отделения выковыривания итемов от их сохранения лучше код писать не так
AR
кого не видит спайдер?
AR
ну и я блин ещё раз повторю, не пайплайны, а экспортеры
AR
settings, т.е. я ставлю там допустим DOWNLOAD_DELAY = 5, спайдер как буд-то игнорит это, если внутри самого спайдера custom_settings прописать download_delay:3 - слушается
это не называется "не видит"
AR
ну и если уж привык костылить custom_settings, то чо б остальное туда же не вписать
AR
раз уж неохота с критичной проблемой разбираться
