Size: a a a

2019 November 09

AZ

Anton Zadorozhniy in Data Engineers
Serg Slipushenko
Афина, престо... Что угодно но не хайв
Только у них метастора своего нету, все равно нужен хайв ;) (для Афины глу)
источник

AZ

Anton Zadorozhniy in Data Engineers
В третьем хайве метасторе выделен, его можно без хайва и хадупа отдельно поставить (правда в Спарк поддержка такого так себе, там были тикеты в третий Спарк)
источник

ME

Max Efremov in Data Engineers
Хм, а как в касандре вставить новую строку, чтобы timeuuid содержал нужную дату, но был уникальным? minTimeuuid всегда выдаст тоже значение.
источник

ME

Max Efremov in Data Engineers
Кажется документация говорит, что никак и только клиентом генерить через разные либы, но может что-то упускаю.
источник

ЕГ

Евгений Глотов in Data Engineers
‌‎
Товарищи инженеры, а давайте срач external таблицы vs классические таблицы
Спарк метасторе топчик, с мэнэджд таблицами, чтоб хайву было не видно)
источник
2019 November 10

t

tenKe in Data Engineers
Max Efremov
Хм, а как в касандре вставить новую строку, чтобы timeuuid содержал нужную дату, но был уникальным? minTimeuuid всегда выдаст тоже значение.
емнип там в cql была отдельная функция для этого
источник

ME

Max Efremov in Data Engineers
tenKe
емнип там в cql была отдельная функция для этого
Есть minTimeuuid и maxTimeuuid. Но это не тру uuid
источник

GP

Grigory Pomadchin in Data Engineers
я потер) смотрите куда пишите) малоли, что сольете еще
источник

ДШ

Дмитрий Шмыглёв in Data Engineers
Сори, ребенок телефоном поигрался, а я не заметил
источник

ДШ

Дмитрий Шмыглёв in Data Engineers
Grigory Pomadchin
я потер) смотрите куда пишите) малоли, что сольете еще
Спасибо)
источник
2019 November 11

AZ

Anton Zadorozhniy in Data Engineers
Дамы и господа, а какие кто использует по России погодные источники? Интересует онлайновые и батч для истории
источник

GP

Grigory Pomadchin in Data Engineers
Anton Zadorozhniy
Дамы и господа, а какие кто использует по России погодные источники? Интересует онлайновые и батч для истории
не нравится тебе овм?
источник

GP

Grigory Pomadchin in Data Engineers
источник

C

Combot in Data Engineers
Onyia àb has been banned! Reason: CAS ban.
источник
2019 November 12

S

Stanislav in Data Engineers
28 ноября - приходите кто хочет послушать про nifi
https://it.rt.ru/rt_event/mitap-po-nifi/
источник

AB

Andrey Bel in Data Engineers
👍👍👍
источник

DM

Daniel Matveev in Data Engineers
‼️Самое важное в Data Engineers Group‼️

🔹 NEW!!!
Всем привет! Отличные новости! Уже буквально через неделю Moscow Spark #9. Налетай https://moscowspark.timepad.ru/event/1117131/

🔹 28 ноября - приходите кто хочет послушать про nifi
https://it.rt.ru/rt_event/mitap-po-nifi/
(упоминания нет, значит проходит в дефолт сити)

🔹 Scalalaz #72 с гостями из NVidia.

Ребята расскажут о том, как они используют GPU и Spark и что они на самом деле не из МВидео: https://scalalaz.ru/series-72.html Мы пытаемся немного эксперментировать с форматами и решили завести Discord канал, что бы писаться и общаться по теме эфира: https://discord.gg/RnugmrU
источник

AM

Andrey Morozovsky in Data Engineers
Max Efremov
Хм, а как в касандре вставить новую строку, чтобы timeuuid содержал нужную дату, но был уникальным? minTimeuuid всегда выдаст тоже значение.
Нельзя просто так взять и сгенерить уникальный таймуид за нужную дату. Rfc4122 не позволяет
источник

AM

Andrey Morozovsky in Data Engineers
Но можно написать генерилку своих таймуидов, не по рфц. Я так и сделал
источник

ME

Max Efremov in Data Engineers
Andrey Morozovsky
Нельзя просто так взять и сгенерить уникальный таймуид за нужную дату. Rfc4122 не позволяет
Хм, для генерации можно только текущее время использовать?
источник