Size: a a a

2020 August 20

AS

Andrey Smirnov in Data Engineers
Анатолий Клюса
Хотя, сорян, конечно, у нас пока такая постановка задачи... Трачу тут ваше время, а не могу толком сказать даже, насколько большой там будет поток данных, какие выборки...
Возможно, и правда, надо замутить постгрес на трех серверах с репликой и успокоиться на этом, а дальше уже смотреть по росту объемов и запросов.
да, а если хочется чего-нибудь этакого, то попробуй как посоветовали выше citusdata
источник

АК

Анатолий Клюса... in Data Engineers
Nikolay
Нету там oltp нормального. После oracle вам все будет плохо
Про импалу? Да. Там, насколько я понял, транзакции реализуются как отдельные avro или паркеты...
Каждая транзакция - отдельный такой файл.
Ну... тогда постгрес наверное на трех хостах с полной репликацией, если она там доступна из коробки...
источник

AE

Alexey Evdokimov in Data Engineers
дык нету в пг из коробки нормальной репликации
источник

АК

Анатолий Клюса... in Data Engineers
Alexey Evdokimov
дык нету в пг из коробки нормальной репликации
Выше citusdata советовали... Только смотрю что это)
источник

АК

Анатолий Клюса... in Data Engineers
Andrey Smirnov
да, а если хочется чего-нибудь этакого, то попробуй как посоветовали выше citusdata
Спс, интересная вроде штука. Это такой себе... мини-гринплам?
источник

AS

Andrey Smirnov in Data Engineers
Alexey Evdokimov
дык нету в пг из коробки нормальной репликации
а что понимается под нормальной репликацией?
источник

AS

Andrey Smirnov in Data Engineers
Анатолий Клюса
Спс, интересная вроде штука. Это такой себе... мини-гринплам?
не работал с гринпламом, тут extension, там fork от постгре
источник

AZ

Anton Zadorozhniy in Data Engineers
Alexey Evdokimov
дык нету в пг из коробки нормальной репликации
смотря какие у кого стандарты, по-хорошему нормальной репликации вообще не существует)
источник

AE

Alexey Evdokimov in Data Engineers
ну я тоже только с ванильным пг работал
источник

AZ

Anton Zadorozhniy in Data Engineers
Alexey Evdokimov
ну я тоже только с ванильным пг работал
в ванильном есть WAL shipping (целиком весь сервер, но можно синхрон включить) и логическая (с открытым протоколом, благодаря чему debezium с друзьями на него садятся) - это не нормальные репликации?
источник

AE

Alexey Evdokimov in Data Engineers
нормальная это мифический мультимастер. для пг его перкона только вроде обещает? или ещё кто?
источник

AE

Alexey Evdokimov in Data Engineers
эт надо погуглить, аж интересно стало
источник

AE

Alexey Evdokimov in Data Engineers
давно не смотрел эту тему
источник

AZ

Anton Zadorozhniy in Data Engineers
мультимастер это вроде про HA а не про репликацию
источник

AE

Alexey Evdokimov in Data Engineers
а топикстартеру нужно и то и другое и чтобы всё сразу
источник

АК

Анатолий Клюса... in Data Engineers
Сорян, ванильный - это... какой?)
источник

AK

Aleksey Kislitsa in Data Engineers
Анатолий Клюса
Сорян, ванильный - это... какой?)
Наверное из основного репозитория, ванильное ядро например это то, которое от разрабов, а не Дебиан или РедХат
источник

A

Alex in Data Engineers
у кого-то есть ванильное ядро?
источник

AZ

Anton Zadorozhniy in Data Engineers
скорее не перкона, не энтерпрайздб, не постгрепро
источник

AZ

Anton Zadorozhniy in Data Engineers
2ndquadrant еще есть, у них как раз мультимастер для ПГ
источник