AG
щас всё развлечение на продакшене происходит, да?
Size: a a a
2020 July 16
A
я бинари не смогу в BQ скоримиить
просто проверьте...
YB
YS
бинари не импортится
Я имел в виду, что его в принципе можно преобразовать в то, что можно импортировать.
Тем не менее, bottleneck (если это всё вместе занимает 4 часа) где-то дальше — в записи на диск, например.
Тем не менее, bottleneck (если это всё вместе занимает 4 часа) где-то дальше — в записи на диск, например.
A
Yaroslav Schekin
Я имел в виду, что его в принципе можно преобразовать в то, что можно импортировать.
Тем не менее, bottleneck (если это всё вместе занимает 4 часа) где-то дальше — в записи на диск, например.
Тем не менее, bottleneck (если это всё вместе занимает 4 часа) где-то дальше — в записи на диск, например.
25 минут на конвертирование формата не дофига?
YS
я думаю что там disk i/o проседает. Не обеспечивает хостер заявленные показатели скорости
Да, похоже на что-то такое... Потому что по расчётам выходит: https://t.me/pgsql/238372
EM
Yaroslav Schekin
Если там "настоящий" OLTP — просто не получится, нет?
почему не получится. но для рекомендаций по типу таблиц нужно понимать конечно что за данные и как можно изменения получать
СГ
успеете до этого проверить pg_test_fsync?
YS
25 минут на конвертирование формата не дофига?
Ну это же не только конвертирование... и тем не менее, как Вы предлагаете повлиять на эту часть?
A
Предлагаю делать что-либо на реальном железе, а в облаке минимизировать какие-либо операции....
YB
успеете до этого проверить pg_test_fsync?
нет утилиты. пошла к девопсам
YS
почему не получится. но для рекомендаций по типу таблиц нужно понимать конечно что за данные и как можно изменения получать
Хмм... вот с сайта:
When NOT to use ClickHouse
✕ Transactional workloads (OLTP)
Там вообще ACID транзакции есть теперь?
When NOT to use ClickHouse
✕ Transactional workloads (OLTP)
Там вообще ACID транзакции есть теперь?
EM
Yaroslav Schekin
Хмм... вот с сайта:
When NOT to use ClickHouse
✕ Transactional workloads (OLTP)
Там вообще ACID транзакции есть теперь?
When NOT to use ClickHouse
✕ Transactional workloads (OLTP)
Там вообще ACID транзакции есть теперь?
там блок данных записывается либо не записывается целиком
YS
там блок данных записывается либо не записывается целиком
Это не имеет значения. Если нет ACID transactions, для OLTP я бы просто не связывался.
EM
Yaroslav Schekin
Это не имеет значения. Если нет ACID transactions, для OLTP я бы просто не связывался.
ну не связывайтесь и страдайте с постгресом )) что могу сказать
YS
ну не связывайтесь и страдайте с постгресом )) что могу сказать
Ну связывайтесь и страдайте потерями [очередного] бизнеса, что я могу сказать.
So funny my eye. :(
So funny my eye. :(
EM
выстроить просто процесс записи данных надо так, как нужно аналитике
YS
выстроить просто процесс записи данных надо так, как нужно аналитике
Я писал о полноценной OLTP базе данных, а не о каком-то "процессе записи данных для аналитики", если что.
AG
ну не связывайтесь и страдайте с постгресом )) что могу сказать
cstore_fdw :)
EM
Yaroslav Schekin
Я писал о полноценной OLTP базе данных, а не о каком-то "процессе записи данных для аналитики", если что.
хотелось бы понять каким образом скажем Clickhouse не удовлетворяет конкретному кейсу. деталей по кейсу не хватает чтобы сказать что-либо
Почему не смогли наладить загрузку данных в тот же BQ - открытый вопрос
Почему не смогли наладить загрузку данных в тот же BQ - открытый вопрос