Size: a a a

2019 October 25

МС

Михаил Синегубов in Scrapy
код запуска паука
источник

МС

Михаил Синегубов in Scrapy
погодь, мусора куча
источник

МС

Михаил Синегубов in Scrapy
from scrapy.crawler import CrawlerRunner
from scrapy.utils.log import configure_logging
import sys
from scrapy.utils.project import get_project_settings
from scaner.spiders.skelet_info2 import SkeletInfo2Spider
from scrapy.crawler import CrawlerProcess

def main():
   configure_logging()

   process = CrawlerProcess(get_project_settings())
   process.crawl(SkeletInfo2Spider)
   process.start()  # the script will block here until the crawling is finished

if __name__ == '__main__':
   sys.exit(main())
источник

МС

Михаил Синегубов in Scrapy
во, этот код нормально работает. не скажу насчет перекрытия настроек именно в этом коде, но настройки из settings.py подтягиваются
источник

МС

Михаил Синегубов in Scrapy
эм, а ведь твой код то-же работает...
источник

МС

Михаил Синегубов in Scrapy
@vlade11115, "коржик", ты тут?
источник

АП

Агент Печенька in Scrapy
М?
источник

МС

Михаил Синегубов in Scrapy
шо, "М", я твой код со своим пауком скрестил, все пашет....
источник

АП

Агент Печенька in Scrapy
Блин, значит я где-то наебался.
источник

АП

Агент Печенька in Scrapy
Покажи версию скрапи.
источник

МС

Михаил Синегубов in Scrapy
отличия только в том, что лог в консоль лезет...
источник

МС

Михаил Синегубов in Scrapy
а как ее гянуть, эту версию, 1.7 какая то :)
источник

МС

Михаил Синегубов in Scrapy
точно 1.7.3
источник

АП

Агент Печенька in Scrapy
Я до завтра АФК, спасибо за помощь.
источник

МС

Михаил Синегубов in Scrapy
а ты из под чего именно стартуешь паука? может косяк с путями....
ну, ой все, тогда я тож баюшки, а то в 5 утра вставать..... 😭
источник
2019 October 26

ВЛ

Владислав Литвинюк in Scrapy
Alexander Serebrov
а скорее всего можно сделать еще более общий словарь, ну типа:
{domain: {repair_type: money}}  и еще больше свернуть в него
Вот так нормально будет?
источник

AS

Alexander Serebrov in Scrapy
А зачем уровень «домен»? 😅
источник

ВЛ

Владислав Литвинюк in Scrapy
Alexander Serebrov
А зачем уровень «домен»? 😅
несколько доменов
источник

AS

Alexander Serebrov in Scrapy
Ну так можно ж просто их использовать как ключи и все
источник

AS

Alexander Serebrov in Scrapy
Ну и я не совсем так имел в виду конечно... но с телефона не покажу
источник