K
использовали это https://github.com/internetitem/logback-elasticsearch-appender . рабоатет, но код там так себе, поток отправки иногда умирает если есть сетевые задержки, потом создается новый. т.е. перфоманс так себе.
Size: a a a
2020 November 09
K
использовали это https://github.com/internetitem/logback-elasticsearch-appender . рабоатет, но код там так себе, поток отправки иногда умирает если есть сетевые задержки, потом создается новый. т.е. перфоманс так себе.
A
использовали это https://github.com/internetitem/logback-elasticsearch-appender . рабоатет, но код там так себе, поток отправки иногда умирает если есть сетевые задержки, потом создается новый. т.е. перфоманс так себе.
да, спасибо :) буду делать через logback в logstash
ПФ
Разный. Зависит от даты. Но в целом не большой. До гига я думаю в день. Тут важно что доставка должна быть гарантирована
Берём jdbc драйвер в исходному хранилищу, jdbc драйвер к целевому, и копируем. В итоге получится что-то типа https://github.com/llofberg/db-copy
ПФ
ПФ
Ну или вот так
2020 November 10
Ж
Может кто то все таки работал с этим и может поделиться опытом? ☺️
Ж
Переслано от Жмака
Всем привет. Кто-нибудь пользовался distributed kmodes (kmean clustering) на скале или джаве? Пользовался ли спарковскими библиотеками или какой то другой?
G
Ну или вот так
Спасибо огромное как всегда 🙂
Буду почитать.
Буду почитать.
S
Всем, привет!) Подскажите, пожалуйста, знающие люди, или ткните носом, где можно почитать про карьерный трек в data engineering ?
DZ
Сдохни или умри
AT
Красавчег!
N
Svetlana
Всем, привет!) Подскажите, пожалуйста, знающие люди, или ткните носом, где можно почитать про карьерный трек в data engineering ?
А что вы под этим понимаете?
ME
Junior Data Engineer -> Data Engineer -> Senior Data Engineer -> Lead Data Engineer -> ...
PA
Svetlana
Всем, привет!) Подскажите, пожалуйста, знающие люди, или ткните носом, где можно почитать про карьерный трек в data engineering ?
Подойдёт?
N
Junior Data Engineer -> Data Engineer -> Senior Data Engineer -> Lead Data Engineer -> ...
… -> junior finnish cleaner
DZ
… -> junior finnish cleaner
janitor
S
А что вы под этим понимаете?
интересует, что и на каком уровне нужно знать в соответствие с градацией junior - middle - senior - ...