M
а бигдату слышал пишут на джаве/скале, из-за кол-во инструментов и либ, написанных под jvm
Size: a a a
2020 September 09
A
насчет мл, питон разве не лучше из-за уже готовых либ?
в ноде тоже вполне достаточно готовых либ
A
а бигдату слышал пишут на джаве/скале, из-за кол-во инструментов и либ, написанных под jvm
Все зависит от архитектуры приложения. Те же построения разного рода аггрегаций по данным и анализ можно делать на любом языке даже без всяких либ. Особенно либы не помогут, если это какая-то специфичная область (не айпи)
A
Если нужен скейлинг для этого - самый простой вариант взять амазоновские лямбды или им подобные, написать на жсе и выставлять "клиентам" счет за фактически потраченное время на процессинг их данных + то, что себе в карман.
2020 September 10
a
Всем привет. У кого-то есть положительный опыт использования pm2 с esm?
TS
Всем привет. У кого-то есть положительный опыт использования pm2 с esm?
Нет
АП
пока еще никакая, я уезжала - не до того было, но хочу сделать 4-5 базовых приложений на разных языках чтобы понять что нравится. в github буду складывать.
Мне интересно было бы узнать итог и выводы. Понравилось а, потому что в нём, а вот б не понравилось, не хватило того-то
Т
ну, не обязательно база, я могу вам скинуть видео где человек за 8 минут расскажет что это и вы поймете
Можно и мне плз
M
и близко нет, это брокер сообщений, который позволяет хрнаить очереди сообщений, если например консьюмер(обработчик) еще не успел их обработать
в отличии от rabbitmq не позволет заводить больше одного консьюмера на очередь
в отличии от rabbitmq не позволет заводить больше одного консьюмера на очередь
> в отличии от rabbitmq не позволяет заводить больше одного консьюмера на очередь
https://www.rabbitmq.com/tutorials/tutorial-two-javascript.html
https://www.rabbitmq.com/tutorials/tutorial-two-javascript.html
ЕХ
> в отличии от rabbitmq не позволяет заводить больше одного консьюмера на очередь
https://www.rabbitmq.com/tutorials/tutorial-two-javascript.html
https://www.rabbitmq.com/tutorials/tutorial-two-javascript.html
все правильно, а кафка нет
нооо, я мог ошибиться, напутать что-то)
нооо, я мог ошибиться, напутать что-то)
M
Есть задача перенести данные из постгреса с одного сервера на другой. Идея такая, делаю селект на одном сервере, отправляю в вебсокет и принимаю на другом сервере и делаю инсерт. Вопрос как лучше делать селект, таблицы большие, выбирать мелкими кусочками? сериализовать в буфер или джейсон.стрингифай?
TS
Есть задача перенести данные из постгреса с одного сервера на другой. Идея такая, делаю селект на одном сервере, отправляю в вебсокет и принимаю на другом сервере и делаю инсерт. Вопрос как лучше делать селект, таблицы большие, выбирать мелкими кусочками? сериализовать в буфер или джейсон.стрингифай?
Для этого есть репликация, не выдумывайте
M
Для этого есть репликация, не выдумывайте
о. понял. спасибо
ES
еще есть pg_dump и pg_restore
TS
еще есть pg_dump и pg_restore
ну он же про сокеты говорит, подразумевая, что постоянное обновление хочет
M
Не. Мне просто перенести и забыть про старый сервер.
TS
Не. Мне просто перенести и забыть про старый сервер.
ну тогда через дамп, однозначно
M
ну тогда через дамп, однозначно
А для этого надо место на винте? ) просто там база на 700гб, а свободно только 7 ) и скоро оно закончился полностью. Потому и была идея с сокетом. Перекинуть и часть удалить. Чтобы место освободить
TS
А для этого надо место на винте? ) просто там база на 700гб, а свободно только 7 ) и скоро оно закончился полностью. Потому и была идея с сокетом. Перекинуть и часть удалить. Чтобы место освободить
где хостится?
M
где хостится?
hetzner. второй сервер там же