AZ
я правда так и не нашел где скачать без регистрации и смс
там же где emr
Size: a a a
2020 September 24
N
там же где emr
они обещали заопенсорсить свою сборку сбердуп. типа клоудера плохая и старая, сейчас мы туда напихаем стейтофзеарт
AZ
они обещали заопенсорсить свою сборку сбердуп. типа клоудера плохая и старая, сейчас мы туда напихаем стейтофзеарт
а, эт новое, я не слышал про ОСС
AE
я правда так и не нашел где скачать без регистрации и смс
а зачем скачивать, если оно есть hosted
A
Концепция осталась та же, только мы стали повышать версии быстрее бигтопа
Так что теперь там должен быть 3 спарк
Так что теперь там должен быть 3 спарк
Если документация не врёт, то версия спарка - 2.3.2
A
AG
Коллеги а как вы работаете со всякими дата алертами, типа, выросло количество нуллов на 100500%. Какие инструменты и каналы используете для доставки такой информации?
AG
Или, партнёр проебал sla и данные не приехали когда должны были быть. Нужно же как то уведомить кого надо. Как?
AG
Пока на коленке сделали доставку в слак но это не серьёзно
2020 September 25
OA
Коллеги а как вы работаете со всякими дата алертами, типа, выросло количество нуллов на 100500%. Какие инструменты и каналы используете для доставки такой информации?
Джоба с процедурой. Которая вызывает процедуру отправки мейла с агрегированной статистикой.
OA
N
Коллеги а как вы работаете со всякими дата алертами, типа, выросло количество нуллов на 100500%. Какие инструменты и каналы используете для доставки такой информации?
airflow считает и шлет в слак. метрики в PG пишет
ME
Пока на коленке сделали доставку в слак но это не серьёзно
Слак, емейлы и система пейджеров для дежурных
ME
Пока первые два, для дежурных в планах
N
Пока на коленке сделали доставку в слак но это не серьёзно
ну настрой кастомный алерт в промитиус через Pushgateway. будешь девопс 300 к/сек
OA
А вообще в проектах где некуда было девать деньги прекрутили коллибру с дашбордами и посадили фолоу зе сан сапорт сторожить.
ME
Если клауд-вей, то можно sns настроить, будет смс приходить)
АБ
Наркоманский вопрос:
Если создать hive-таблицу со свойством 'transactional_properties'='insert_only', то будет ли запись в таблицу работать быстрее или только будет ограничение на CRUD?
Если создать hive-таблицу со свойством 'transactional_properties'='insert_only', то будет ли запись в таблицу работать быстрее или только будет ограничение на CRUD?
AZ
Пока на коленке сделали доставку в слак но это не серьёзно
можно еще тикеты автоматически в джире заводить, это очень серьезно
AG
Просто хочется что-то лучше чем имейлы которые будут спамить инбокс и слак канал который все замьютят. Что-то с удобной настройкой получателей, чтобы можно было видеть предыдущие похожие алерты, какие то теги и всякие графики появления ивента по времени