В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Node.js — русскоговорящее сообщество

5369 membersпожаловаться на группу
2019 October 19

И

Илья | 😶 in Node.js — русскоговорящее сообщество
Yaroslav Kuznetsov
Тут вопрос именно работы граббера
А разница ?
источник
20:43пожаловаться

НК

Назар Калитюк in Node.js — русскоговорящее сообщество
Yaroslav Kuznetsov
Всем привет, вопрос, как лучше организовать работу граббера сайта, есть сайт, на нем переоидически выкладывают товар, мне нужно как можно быстрее забирать данные, на ум приходит только запуск крона с моим грабером каждые 2-3 минуты
можно не запускать, а просто сидеть на сайте и обновлять страницу
источник
20:44пожаловаться

x

x1dan in Node.js — русскоговорящее сообщество
Yaroslav Kuznetsov
Всем привет, вопрос, как лучше организовать работу граббера сайта, есть сайт, на нем переоидически выкладывают товар, мне нужно как можно быстрее забирать данные, на ум приходит только запуск крона с моим грабером каждые 2-3 минуты
А ты проверял есть ли у них апишка? Есть ли у них rss лента или еще что либо
источник
20:46пожаловаться

YK

Yaroslav Kuznetsov in Node.js — русскоговорящее сообщество
Назар Калитюк
можно не запускать, а просто сидеть на сайте и обновлять страницу
Да я смотрю тут просто мастер сарказма
источник
20:46пожаловаться

YK

Yaroslav Kuznetsov in Node.js — русскоговорящее сообщество
x1dan
А ты проверял есть ли у них апишка? Есть ли у них rss лента или еще что либо
Rss и апи нет
источник
20:46пожаловаться

x

x1dan in Node.js — русскоговорящее сообщество
контент действительно каждые 3 минуты обновляется?
источник
20:46пожаловаться

x

x1dan in Node.js — русскоговорящее сообщество
может быть раз в 30 минут будет более чем достаточно
источник
20:46пожаловаться

НК

Назар Калитюк in Node.js — русскоговорящее сообщество
Yaroslav Kuznetsov
Да я смотрю тут просто мастер сарказма
я про то, чтоб puppeеter сидел. А не заходил постоянно заново
источник
20:46пожаловаться

YK

Yaroslav Kuznetsov in Node.js — русскоговорящее сообщество
Назар Калитюк
я про то, чтоб puppeеter сидел. А не заходил постоянно заново
А, тогда сорян)) не понял сразу) сейчас гляну, спасибо)
источник
20:47пожаловаться

YK

Yaroslav Kuznetsov in Node.js — русскоговорящее сообщество
x1dan
может быть раз в 30 минут будет более чем достаточно
Может, я со временем посмотрю и конечно оптиизирую крон джоб
источник
20:48пожаловаться

НК

Назар Калитюк in Node.js — русскоговорящее сообщество
Yaroslav Kuznetsov
А, тогда сорян)) не понял сразу) сейчас гляну, спасибо)
если там без логинна то будет норм, иначе нужно будет контролить сессиию. + можно сделать отдельно сканер новых товаров, и уже забор данных.
источник
20:49пожаловаться

YK

Yaroslav Kuznetsov in Node.js — русскоговорящее сообщество
Назар Калитюк
если там без логинна то будет норм, иначе нужно будет контролить сессиию. + можно сделать отдельно сканер новых товаров, и уже забор данных.
Да логина нет, пошёл курить доки
источник
20:49пожаловаться

x

x1dan in Node.js — русскоговорящее сообщество
если без логина - то пупитер и не нужен
источник
20:49пожаловаться

YK

Yaroslav Kuznetsov in Node.js — русскоговорящее сообщество
Всем спасибо!
источник
20:49пожаловаться

VR

Vitaliy Rad in Node.js — русскоговорящее сообщество
https://github.com/brianc/node-postgres, норм или лучше орм секвелайз брать ?
GitHub
brianc/node-postgres
PostgreSQL client for node.js. Contribute to brianc/node-postgres development by creating an account on GitHub.
источник
21:04пожаловаться

VR

Vitaliy Rad in Node.js — русскоговорящее сообщество
это как я понял все квери вручную писать. методы и т.д только в орм ?)
источник
21:12пожаловаться

GS

Grigorii K. Shartsev in Node.js — русскоговорящее сообщество
Vitaliy Rad
https://github.com/brianc/node-postgres, норм или лучше орм секвелайз брать ?
GitHub
brianc/node-postgres
PostgreSQL client for node.js. Contribute to brianc/node-postgres development by creating an account on GitHub.
Совсем всырую не стоит. Лучше выбирать между ОРМ и Квери билдером
источник
21:13пожаловаться

GS

Grigorii K. Shartsev in Node.js — русскоговорящее сообщество
Если не хочется ОРМ, можно глянуть на knex
источник
21:13пожаловаться

VR

Vitaliy Rad in Node.js — русскоговорящее сообщество
Grigorii K. Shartsev
Если не хочется ОРМ, можно глянуть на knex
ну мне не то что не хочется, у меня там самые простые запросы будут, так не хочу нагружать ноду пакетами ), взять что попроще ...
источник
21:14пожаловаться

VR

Vitaliy Rad in Node.js — русскоговорящее сообщество
Grigorii K. Shartsev
Совсем всырую не стоит. Лучше выбирать между ОРМ и Квери билдером
и чтобы поддержка кода проще была )
источник
21:15пожаловаться