AZ
даже без кубов?
конечно, зачем нам кубы
Size: a a a
2020 December 11
ME
кубы в банках и телекоме мы только лет через 5 увидим
Ну кстати, в Netcracker OpenShift юзался года 3 назад уже
ME
серверлесс спарк тут грядет, вообще без кластеров
А у GCP он есть? Как я понял, DataProc это нифига не серверлесс(
AT
это очень условный серверлесс))
опытные говорят там везде сервера в итоге ))
АЖ
конечно, зачем нам кубы
ну это типа “не хочу знать, как оно рабтает, дайте кнопку”
АЖ
такое
AZ
Al T
опытные говорят там везде сервера в итоге ))
сервера есть везде, но в случае фаргейта (особенно EKS + Fargate) это просто способ немного сэкономить на пустом капасити воркеров, за счет кучи других неудобств (долго стартуют, нет привелегий, нельзя демонсеты и проч), при этом 50 баксов за сам EKS, даже без воркеров, все равно надо платить
ME
ну это типа “не хочу знать, как оно рабтает, дайте кнопку”
Только его трудновато кастомизировать(
AZ
А у GCP он есть? Как я понял, DataProc это нифига не серверлесс(
датамеханикс работают на GCP, да
ME
датамеханикс работают на GCP, да
Это какое-то стороннее решение? Я пытался найти аналог AWS Glue, но вроде нет такого
AZ
Это какое-то стороннее решение? Я пытался найти аналог AWS Glue, но вроде нет такого
ME
АЖ
Кубы уже в банках российских. Вот тоько в мире биг даты и вообще обработки данных ещё редко встречаются, но уже знаю проект в одном банке, где спарк на кубере крутится для реал тайм обработки
это пока всполохи, как и хадупы в начале 2010-х
AS
серверлесс спарк тут грядет, вообще без кластеров
а там еще сам спарк не переписали на C++, нет таких слухов?
AT
говорят скоро на питон перепишут, а то скала - медленно очень
AZ
а там еще сам спарк не переписали на C++, нет таких слухов?
переписали конечно, Delta Engine
AS
переписали конечно, Delta Engine
так это не сам спарк, это их озеро, или я не правильно понимаю?
AZ
так это не сам спарк, это их озеро, или я не правильно понимаю?
это по сути спарк рантайм https://databricks.com/product/delta-engine
AZ
можно рассматривать как cloud native MPP DBMS которая понимает спарковый АПИ
AZ
это пока всполохи, как и хадупы в начале 2010-х
российскими банками энтерпрайз не заканчивается, в соседнем русскоязычном чатике опсов только и разговоры что про кубер и микросервисы