Size: a a a

2021 March 14

AZ

Anton Zadorozhniy in Data Engineers
Твиттер переехал на кубер и можно сказать все... это один из примеров что в open source выигрывает не лучший дизайн, а лёгкость первого опыта и популярность
источник

N

Nikolay in Data Engineers
Подскажите  , как Zk выполняет запрос getData ? Он ведь пишет на лидер , а читает локально и при этом обеспечивает read after write consistency. Читал ,что он ждёт по xzid, но мне хочется увидеть это в коде ZK. Но пока не удается. Там , где я считаю , что это делается - нет никакого ожидания. Там просто идёт get в мапу. Может есть какие идеи ,что позволят мне выйти на этот код ?
источник

A

Alex in Data Engineers
Anton Zadorozhniy
Твиттер переехал на кубер и можно сказать все... это один из примеров что в open source выигрывает не лучший дизайн, а лёгкость первого опыта и популярность
можно линку? А то я пропустил новость
источник

A

Alex in Data Engineers
Или вы вообще про сравнение с мезосом?
источник

AZ

Anton Zadorozhniy in Data Engineers
Пару лет назад активно обсуждалось везде https://www.linux.com/news/twitter-announced-switch-mesos-kubernetes/
источник

A

Alex in Data Engineers
я подумал свежая новость какая-то =)
источник

AZ

Anton Zadorozhniy in Data Engineers
Из крупных пользователей эпол тоже переехал на кубер
источник

AZ

Anton Zadorozhniy in Data Engineers
Кубер в этом смысле как Линукс, победил по причинам в основном не связанным с технологией, но сейчас это стандарт де-факто и тратить время на что-то ещё нужно только если вы точно знаете что делаете
источник

kk

k k in Data Engineers
Ребят, а за выполнение каких задач (за какие результаты) дата инженерам платят 200к+ ?
источник

ME

Max Efremov in Data Engineers
Выполнять желания заказчика)
источник

AZ

Anton Zadorozhniy in Data Engineers
k k
Ребят, а за выполнение каких задач (за какие результаты) дата инженерам платят 200к+ ?
Оплата труда (каки другой услуги) на открытом рынке это результат балансирования спроса и предложения, слабо связана с конкретными результатами труда; им платят 200к+ потому что дешевле они отказываются работать, а других найти не могут
источник

K

KrivdaTheTriewe in Data Engineers
k k
Ребят, а за выполнение каких задач (за какие результаты) дата инженерам платят 200к+ ?
источник

K

KrivdaTheTriewe in Data Engineers
Ребят го в @datajobs
источник

K

KrivdaTheTriewe in Data Engineers
@ermakovpetr ну наконец то
источник

PE

Petr Ermakov in Data Engineers
KrivdaTheTriewe
@ermakovpetr ну наконец то
Я все пытался слиться, но просто понял что без тебя, Дим, не могу
источник

C

Combot in Data Engineers
источник

C

Combot in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
Petr Ermakov
Я все пытался слиться, но просто понял что без тебя, Дим, не могу
Дима кстати не пришел в клаб хаус, выше этого оказался
источник
2021 March 15

АС

Артур Семенов... in Data Engineers
Как правильно запустить python-скрипт через spark2-submit в cluster mode, с учетом того, что в условном файле запуска: run.py есть импорты из других пакетов (соседней директории с модулем)
Пробовал через сборку пакета в .egg файл и добавления его в py-files - не взлетает (получаю ошибку non zero exit code 13)
источник

t

tenKe in Data Engineers
собрать венв и разложить его по воркерам и драйверу. Далее указать pythonpath на него
источник