O
Легко
Просто сидеть на легаси проекте у какого нибудь госа?:)
Size: a a a
2020 December 05
СХ
Просто сидеть на легаси проекте у какого нибудь госа?:)
Иди на реальной бигдате ибо пб в кубере не живут
O
Иди на реальной бигдате ибо пб в кубере не живут
Это заблуждение же. Кубер- инструмент, а в «бигдате» не только хранилка, но и много всего вокруг.
СХ
Это заблуждение же. Кубер- инструмент, а в «бигдате» не только хранилка, но и много всего вокруг.
Большая часть бигдаты это сервисы вокруг хранилки, и запихивать в кубер то, что жрет больше оперативы во время выборки чем на хосте - будет только дебил
DT
Иди на реальной бигдате ибо пб в кубере не живут
DT
Или ебей это не то
O
Ну то есть если уж совсем не лочиться вокруг своих тасков, то практически невозможно избежать кубера и прочего подобного.
СХ
Бумагу о снятии ответственности за данные прилагают?
DT
Бумагу о снятии ответственности за данные прилагают?
The platform handles about 8 million metrics per second, 1 billion events per minute and multiple petabytes of logs every day.
O
Большая часть бигдаты это сервисы вокруг хранилки, и запихивать в кубер то, что жрет больше оперативы во время выборки чем на хосте - будет только дебил
Ну такое. Чаще всего удобство и унификация важнее количества оперативки. Ее купить можно, а вот процессы - нет
СХ
The platform handles about 8 million metrics per second, 1 billion events per minute and multiple petabytes of logs every day.
Ну это логи умерли да и срать
СХ
Ну такое. Чаще всего удобство и унификация важнее количества оперативки. Ее купить можно, а вот процессы - нет
Удобство? Рассмешил
O
Я в целом неплохо представляю что такое бигдата, у меня году в 12 или около того были фермы с петабайтами данных, распределенными стораджами, мапредьюсами и всем таким. Там кроме задачки "похранить" еще хренова гора задач про "посчитать", "оркестрировать" и подобного.
СХ
Хельм+хельм файл+терраформ+ ci+werf очень удобно ....
O
Я в целом неплохо представляю что такое бигдата, у меня году в 12 или около того были фермы с петабайтами данных, распределенными стораджами, мапредьюсами и всем таким. Там кроме задачки "похранить" еще хренова гора задач про "посчитать", "оркестрировать" и подобного.
И все это на металле и с нетбутом, да:)
O
Кубик вполне решает достаточно много вопросов про оркестрацию всякого развесистого и наличие "бигдаты" совершенно не исключает наличие кубика или там вообще любой другой технологии.
O
Понятно что сам сторадж ты им вряд ли будешь оркестрировать (хотя че бы и нет в целом?), а вот всякий пейлоад который там запускается - вполне. Там весьма удобные инструменты скедулинга и всяких аннотаций, которые тебе вполне позволят делать всякую магию вроде запуска расчетов ближе к данным, скейлинга и прочего без необходимости писать вообще всю логику про распределение задач, непосредственно запуск, управление жизненым циклом и т.д. В конце концов там в лоб пишется кастомный скедулер, который дает удобные ручки и позволяет решать весьма интересные и нужные задачи.
СХ
Кубик вполне решает достаточно много вопросов про оркестрацию всякого развесистого и наличие "бигдаты" совершенно не исключает наличие кубика или там вообще любой другой технологии.
И добавляет сотни новых за которые потом никто не платит
O
И добавляет сотни новых за которые потом никто не платит
новых чего? не платят за что?
СХ
новых чего? не платят за что?
Новых проблем ошибок и багов