Size: a a a

2021 April 02

ЕП

Евгений Погребняк... in Data Engineers
er@essbase.ru
..  по моему job сюда перебрался
Молчу )
источник

AZ

Anton Zadorozhniy in Data Engineers
+1
источник

GP

Grigory Pomadchin in Data Engineers
+1
источник

SS

Sergey Sheremeta in Data Engineers
Anton Zadorozhniy
Архитектура как функция всегда есть, я писал про архитекторов которые работают только в PowerPoint, Visio и Outlook, не погружаются в код и эксплуатацию
два самых крутых архитектора, которых я знаю:
один не вылезает из консоли - vim, bash, docker. постоянно открыта Графана на втором мониторе.
второй - не вылезает из draw.io/plantuml, Confluence

и я не могу с уверенностью сказать, что кто-то приносит больше пользы команде, а кто-то меньше! оба подхода важны
источник

N

Nikita Blagodarnyy in Data Engineers
Евгений Погребняк
Вопрос почему это халява с псевдо-архитекторами покатывает на рынке
Потому что есть «социальные компании, которые должны предоставлять работу». Ну и не каждый директор может понять балабол-поверпоинтер перед ним или хардкорный петарь, контрибутящий в ядро линукс.
источник

IK

Ilya Karpov in Data Engineers
Ребят, а был у кого-то опыт запуска flink-а на huawei cloud? какая-то путаница возникает с конфигами\перененными среды и jm не видит неверный адрес RM. сталкивался кто?
источник

GP

Grigory Pomadchin in Data Engineers
Жойнитес на DataLove! Сегодня билеты все фри с промокодом DATASPIRIT https://twitter.com/_datalove/status/1377945542311878662?s=20
источник

P

Pavel in Data Engineers
Nikita Blagodarnyy
на то и нужны седые красноглазые архитекторы по 500к/сек, в 3 часа ночи чинящие свое решение.
Хороший архитектор тот, кто спокойно под чашечку утреннего кофе рестартанет упавшую в 3 ночи систему с уверенностью, что данные не проеблись
источник

ME

Max Efremov in Data Engineers
Pavel
Хороший архитектор тот, кто спокойно под чашечку утреннего кофе рестартанет упавшую в 3 ночи систему с уверенностью, что данные не проеблись
у хорошего архитектора она не упадёт, наверное)
источник

P

Pavel in Data Engineers
Max Efremov
у хорошего архитектора она не упадёт, наверное)
Упадет. Всё падает рано или поздно.
источник

EK

Evgenii Kuznetcov in Data Engineers
Я как-то произвел мини-исследование.
Зашел на линкедин, ввел в поиск людей "java", записал к-во результатов.
Потом ввел "java architect". Тоже записал количество результатов.
Поделил одно число на другое, получил долю людей, которые знают джаву и считают себя архитекторами.

Сделал то же самое для скалы. Доля была на порядок меньше.

Пытался сделать для хаскелля. Но там поиск дал только 2 результата: один реальный и один человек, работающий в компании "Haskell architects", которая не имеет отношения к IT :)

Один из возможных выводов - архитекты плодятся в тех языках, где разобраться в написанном - это достижение
источник

P

Pavel in Data Engineers
Evgenii Kuznetcov
Я как-то произвел мини-исследование.
Зашел на линкедин, ввел в поиск людей "java", записал к-во результатов.
Потом ввел "java architect". Тоже записал количество результатов.
Поделил одно число на другое, получил долю людей, которые знают джаву и считают себя архитекторами.

Сделал то же самое для скалы. Доля была на порядок меньше.

Пытался сделать для хаскелля. Но там поиск дал только 2 результата: один реальный и один человек, работающий в компании "Haskell architects", которая не имеет отношения к IT :)

Один из возможных выводов - архитекты плодятся в тех языках, где разобраться в написанном - это достижение
Архитектура, базирующаяся на каком-нибудь хаскеле или скале это пиздец какие бабки в долгосрочной перспективе. Архитектуру лучше строить на фундаментальных и классических инструментах: джава, пыха, перл, си
источник

EK

Evgenii Kuznetcov in Data Engineers
Pavel
Архитектура, базирующаяся на каком-нибудь хаскеле или скале это пиздец какие бабки в долгосрочной перспективе. Архитектуру лучше строить на фундаментальных и классических инструментах: джава, пыха, перл, си
...и джире

Речь о том, что в разных экосистемах разные критерии того, с каким масштабом задач ты должен работать, чтобы говорить, что занимаешься "архитектурой"
источник

ПБ

Повелитель Бури... in Data Engineers
Доброй пятницы! Коллеги хочется получить ачивку за безопасность ) скажите пожалуйста apache ranger достататочно покурить чтобы хадуп окружить внимпнием и заботой. Может есть бест практис. И инете мало инфы , но возможно не те слова гуглю 🧐 спасибо
источник

GP

Grigory Pomadchin in Data Engineers
давайте этот топик в жобс (про архитектуру и сре)
источник

GP

Grigory Pomadchin in Data Engineers
как раз отличная тема там обсудить! кто такие архитекторы и сре
источник

SS

Sergey Shushkov in Data Engineers
Grigory Pomadchin
давайте этот топик в жобс (про архитектуру и сре)
"Пришел лесник и всех разогнал"
источник

GP

Grigory Pomadchin in Data Engineers
ну да, душите весь день)
источник

GP

Grigory Pomadchin in Data Engineers
чекайте жобс, перенс ваш тлдр туда
источник

ПБ

Повелитель Бури... in Data Engineers
Повелитель Бури
Доброй пятницы! Коллеги хочется получить ачивку за безопасность ) скажите пожалуйста apache ranger достататочно покурить чтобы хадуп окружить внимпнием и заботой. Может есть бест практис. И инете мало инфы , но возможно не те слова гуглю 🧐 спасибо
Ну ренжер это только политики доступа. Есть ещё керберос, кнокс, ssl/tls, шифрование хдфс, роли амбари, gssapi и всё такое прочее. Вопрос насколько далеко идти в этом безумии.

Для начала минималка: роли, авторизация по лдап, ходить между хадуп сервисами без повторной авторизации. Вроде все
источник