Телеграмм чат группы scrapy

ребят, у кого был опыт извлечения данных с большого кол-ва эксель файлов, трансформацией полей в json и дальнейшей загрузки в бд? Может есть кто делал, что-то подобное с помощью ETL программ, например (Pentaho, Talend) ?

а пара тыщ файлов считается?) я делал через excel = win32.gencache.EnsureDispatch('Excel.Application') (см. на стековере) преобразование в xlsx, из минусов - нужна машина с виндой, а там уже pandas или openpyxl. Про json могу только orjson порекомендовать, оно быстрей с json работает. А что в итоге, пробовал эту пентаху или таленд, и как?

источник

19:21пожаловаться #9

i in Scrapy

у жж же есть xml api, чуть ли не всем ветрам открытое

источник

19:21пожаловаться #10

i in Scrapy

Или там я как-то легко через rss-feed сделал, блин не помню уже. Помно только что ничего сложного не было там.

источник

19:22пожаловаться #11

🇺L

🇺🇦 Ad Libitum in Scrapy

izzz zzi

https://api.livejournal.com/os/3.0/rest/comments/livejournal.com:25595167/892377/0?count=50&page=1

Увы и ах, эта хрень не работает нормально 🙁 С её помощью нельзя собирать комменты

источник

19:32пожаловаться #12

izzz zzi in Scrapy

🇺🇦 Ad Libitum

Увы и ах, эта хрень не работает нормально 🙁 С её помощью нельзя собирать комменты

Ну там же есть комменты

источник

19:32пожаловаться #13

SoHard 🎄 in Scrapy

🇺🇦 Ad Libitum

Увы и ах, эта хрень не работает нормально 🙁 С её помощью нельзя собирать комменты

так там же все комменты) еще и не надо ничего подделывать в запросе

источник

19:36пожаловаться #14

Zakhar Ganiev in Scrapy

@izzzzzi супер), все стало на свои места.
забираю декорированный телефон, через библиотеку base64 в python прогоняю
@izzzzzi Гран мерси по-братски

источник

19:36пожаловаться #15

🇺L

🇺🇦 Ad Libitum in Scrapy

izzz zzi

Ну там же есть комменты

Это не сработает
https://ru-mac.livejournal.com/22211155.html

Livejournal

Не открываются вложения в mail

Всем хорошего дня! имеется macbook pro 2019 после миграции с macbook перестали открываться вложения(ворд/эксель,пдф файлы) в программе mail, быстрый просмотр файла тоже зависает, но если сохранить на комп, то файлы открываются. Подскажите, пожалуйста, куда лезть и что исправить?

источник

19:38пожаловаться #16

izzz zzi in Scrapy

🇺🇦 Ad Libitum

Это не сработает
https://ru-mac.livejournal.com/22211155.html

Livejournal

Не открываются вложения в mail

Ну кинь пост где это , посмотрим

источник

19:38пожаловаться #17

🇺L

🇺🇦 Ad Libitum in Scrapy

izzz zzi

Ну кинь пост где это , посмотрим

Есть предложение уединиться чтобы не засирать общий чат говном всяким (я про свои изыски) )

источник

19:39пожаловаться #18

Andrey Rahmatullin in Scrapy

Жж же откуда-то грузит каменты аяксом, вряд ли там какой-то рокет саенс

источник

19:56пожаловаться #19

Ghusto in Scrapy

всем привет.
ктото боролся с vue datepicker, нужно вставить дату? пробую через selenium но получается только прописать выбор одной даты, а если дата меняется динамически, то не получается.

источник

22:10пожаловаться #20