Size: a a a

2020 January 14

E

Evgen in Scrapy
В ответе кука
источник

E

Evgen in Scrapy
Самый рабочий вариант - splash :)
источник

E

Evgen in Scrapy
Если мы про стандартный челендж
источник

КЛ

Константин Лебедев in Scrapy
Evgen
Там просто на брейнфаке дурацкий js. Он просто вычисляет значение вырадения и отправляет форму
Как его на движке решить?
источник

E

Evgen in Scrapy
На каком?
источник

КЛ

Константин Лебедев in Scrapy
Ну мне тут посоветовали duktape
источник

E

Evgen in Scrapy
Ну используйте, раз посоветовали
источник

E

Evgen in Scrapy
))
источник

E

Evgen in Scrapy
Я делал через js2py
источник

КЛ

Константин Лебедев in Scrapy
А какие есть еще варианты?
источник

КЛ

Константин Лебедев in Scrapy
Evgen
Я делал через js2py
Супер, на нем получится решить?
источник

E

Evgen in Scrapy
Но они потом чуть поменяли и я понял что каждый раз под каждый сайт подгонять - потеря времени
источник

E

Evgen in Scrapy
И стал пользовать splash
источник

E

Evgen in Scrapy
Да на чем хотите. Можете brainfuck расшифровать если времени много
источник

КЛ

Константин Лебедев in Scrapy
Ок посмотрю еще splash завтра
источник

КЛ

Константин Лебедев in Scrapy
Спасибо
источник

JW

John Wayne in Scrapy
Bulatbulat48
Не уверен что правильно понял, но может ‘spider_closed?’
я правильно понял, при закрытии паука, у него все 10 словарей? и можно раскурить эту тему и забрать все результаты?
источник

МС

Михаил Синегубов in Scrapy
John Wayne
при голом дефолте, у первого словаря длинна 4, у 2го 8, у 7го, 10, и не создаются столбцы больше 4х.т.е теряются данные. FEED_EXPORT_FIELDS не подходит, я беру имена столбцов и словаря, и они разной длинны, я не могу их прописать
Хоть, может, и поздно
как раз Feed export fields и решает эту проблему. Скрави наименовнаие и кол-во полей берет по первому экпортнутому айтему, если имена полей не заданы принудительно. А вот, если заданыпринудительно - то ему насрать что у тебя в айтеме, он смотрит, в перую очередь, на настройки
источник

МС

Михаил Синегубов in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
Evgen
Порядок заголовков кстати scrapy правильно на python 3.4+ вроде тока поддерживает
Тикет-то открыт, я думал вообще не сохраняет, если есть другая инфа написать бы
источник