Size: a a a

2020 November 11

AE

Alexey Evdokimov in Data Engineers
как раз вполне себе язык. в математическом смысле
источник

M

Mi in Data Engineers
При том что пишут в джава стиле иначе хер потом прочитаешь
источник

AE

Alexey Evdokimov in Data Engineers
а скала таки фетиш, и мне тоже не нравится. потому и пишу на жабе
источник

M

Mi in Data Engineers
Alexey Evdokimov
как раз вполне себе язык. в математическом смысле
Да разницы какой язык, любой де это человек-оркестр в плане используемых языков и технологий
источник

SS

Sergey Sheremeta in Data Engineers
Mi
Мне лично немного не нравится этот скала фетишизм
мне кажется, что это не фетишизм, а реализм!
после какого-то порога SLA и объемов данных SQL уже не вывозит
источник

AK

Alena Korogodova in Data Engineers
Все мож и пишут, но на какую конфу не приди - спикеры чуть ли не дрочат на скалу, а питон типа для плебеев
источник

SS

Sergey Sheremeta in Data Engineers
dzuba_artem_used_scala.jpg
источник

M

Mi in Data Engineers
Давайте на джаваскрипте пайплайны писать, где апи спарка
источник

AE

Alexey Evdokimov in Data Engineers
питон хорош для прототипирования на коленке и для удобного дёргания всяких интерфейсов
источник

AZ

Anton Zadorozhniy in Data Engineers
Alexey Evdokimov
как раз вполне себе язык. в математическом смысле
Как ты без проекции что-то сделаешь с чистыми операторами над множествами? Наверное всё-таки реляционная алгебра первична, а это большое расширение теории множеств
источник

AZ

Anton Zadorozhniy in Data Engineers
Sergey Sheremeta
мне кажется, что это не фетишизм, а реализм!
после какого-то порога SLA и объемов данных SQL уже не вывозит
Как языки могут не вывозить по объемам, может речь о конкретных реализациях?
источник

M

Mi in Data Engineers
Anton Zadorozhniy
Как языки могут не вывозить по объемам, может речь о конкретных реализациях?
Он про то что количество ошибок в sql растет куда быстрее со сложностью задачи
источник

M

Mi in Data Engineers
Плюс запрос нельзя обобщить и разнести на логические части (практически)
источник

SS

Sergey Sheremeta in Data Engineers
SQL - декларативный язык, который в любом случае не будет так же эффективен, как императивный с вылизанным кодом
источник

AE

Alexey Evdokimov in Data Engineers
Anton Zadorozhniy
Как ты без проекции что-то сделаешь с чистыми операторами над множествами? Наверное всё-таки реляционная алгебра первична, а это большое расширение теории множеств
равномощны они
источник

AE

Alexey Evdokimov in Data Engineers
Sergey Sheremeta
SQL - декларативный язык, который в любом случае не будет так же эффективен, как императивный с вылизанным кодом
SQL полон по тьюрингу, так что привет
источник

AE

Alexey Evdokimov in Data Engineers
на нём можно написать чё угодно. ну может быть неудобно
источник

M

Mi in Data Engineers
Sergey Sheremeta
SQL - декларативный язык, который в любом случае не будет так же эффективен, как императивный с вылизанным кодом
Но вообще я изначально про то  что SQL очень часто используется так или иначе, не в пайплайне, так в каких-нибудь ad-hoc тасках и тд
источник

M

Mi in Data Engineers
Alexey Evdokimov
на нём можно написать чё угодно. ну может быть неудобно
Можно что угодно написать используя только java generics, но зачем
источник

AZ

Anton Zadorozhniy in Data Engineers
Mi
Он про то что количество ошибок в sql растет куда быстрее со сложностью задачи
Эт да, для этого DSLи и metadata-driven подходы используют, внутри все равно транслируются на какие-то декларативные примитивы которые потом втыкают в оптимизатор (примеры - спарк датафреймы и датасеты, датафреймы в вертике и у нас)
источник