Size: a a a

2020 July 27

DT

Dmitry Titov in Data Engineers
Старый Хрыч
либо трипары
Хорошо, трипар позволит нагнать N часов вперед с момента последнего снапшота? Что бы не потерять изменения?
источник

СХ

Старый Хрыч... in Data Engineers
KrivdaTheTriewe
тут явно просится nosql
😐я уже представил наш селект на 200 строк в hive  который решили запустить
источник

СХ

Старый Хрыч... in Data Engineers
Dmitry Titov
Хорошо, трипар позволит нагнать N часов вперед с момента последнего снапшота? Что бы не потерять изменения?
там можно снаапшот делать хоть каждые 2 минуты
источник

СХ

Старый Хрыч... in Data Engineers
как банки и делают
источник

K

KrivdaTheTriewe in Data Engineers
Старый Хрыч
😐я уже представил наш селект на 200 строк в hive  который решили запустить
а зачем
источник

K

KrivdaTheTriewe in Data Engineers
одно для сырых данных
источник

K

KrivdaTheTriewe in Data Engineers
другое для вьюх
источник

K

KrivdaTheTriewe in Data Engineers
постройте нормальный процесс
источник

K

KrivdaTheTriewe in Data Engineers
нежели хранить сырье в базе, в которой достаточно высокая цена хранения
источник

СХ

Старый Хрыч... in Data Engineers
KrivdaTheTriewe
нежели хранить сырье в базе, в которой достаточно высокая цена хранения
увы,  нас требования зачастую делать селекты с выборками за 10 лет
источник

СХ

Старый Хрыч... in Data Engineers
увы
источник

K

KrivdaTheTriewe in Data Engineers
Старый Хрыч
увы,  нас требования зачастую делать селекты с выборками за 10 лет
но вам для таких селектов транхакции не нужны?
источник

СХ

Старый Хрыч... in Data Engineers
KrivdaTheTriewe
но вам для таких селектов транхакции не нужны?
транзации нужны при записях
источник

K

KrivdaTheTriewe in Data Engineers
можно в кассандру отправить данные или хайв, уже построенную витрину
источник

СХ

Старый Хрыч... in Data Engineers
потому что человек сначала купил товар, а потом отменяет
источник

СХ

Старый Хрыч... in Data Engineers
и это к нам тоже попадает
источник

K

KrivdaTheTriewe in Data Engineers
ну а зачем аналитику поверх sql делать?
источник

DT

Dmitry Titov in Data Engineers
Старый Хрыч
там можно снаапшот делать хоть каждые 2 минуты
И все это совершенно бесплатно и без штрафов.
Моя позиция, то, что все те обоснования что ты назвал, что это дает больше возможностей чем несчастный постгрес, на самом деле не не являются ими, тк в постгре это тоже можно сделать.
Да, наверняка есть у оракла преимущества перед постгресом, но не то что ты назвал.
источник

K

KrivdaTheTriewe in Data Engineers
Старый Хрыч
потому что человек сначала купил товар, а потом отменяет
10 лет назад и схема была другая
источник

СХ

Старый Хрыч... in Data Engineers
KrivdaTheTriewe
10 лет назад и схема была другая
да, но схема модернизируется, там куча веселья у налоговой было
источник