YB
хм, зачем заново? если ей позволено отставать на, скажем, 6 часов, то WAL-ы всё время текут, просто не применяются.
не. нельзя на 6 часов
Size: a a a
2020 July 16
YB
это уже сильно старые данные
A
Почему 6 часов? реплика чтоль тоже в том же облаке?
YB
если есть примеры настройки репликации для аналитических запросов отстающей не более часа от мастера - была бы признательна посмотреть
YS
ну тут to /dev/null и binary(т.е. без преобразования, или я не правильно понимаю)?
» binary format, кстати — это тоже преобразование, не просто вывод "как есть"
;)
Ну и т.п., см. выше.
;)
Ну и т.п., см. выше.
VY
не. нельзя на 6 часов
а сколько занимает по времени OLAP запрос?
A
Yaroslav Schekin
» binary format, кстати — это тоже преобразование, не просто вывод "как есть"
;)
Ну и т.п., см. выше.
;)
Ну и т.п., см. выше.
упс, не
внимателен
внимателен
VY
если запрос занимает 1 час, то к концу выполнения он видит данные часовой “несвежести”. это допустимо?
YB
если запрос занимает 1 час, то к концу выполнения он видит данные часовой “несвежести”. это допустимо?
сейчас на текущей базе те запросы которые хотим вынести в BQ работают 5 часов. и да, это неприемлемо и деелать то же самое на реплике - не вариант
СГ
не. нельзя на 6 часов
Уезжайте с вашего виртуального сервера. И запросы будут намного быстрее выполняться и реплика не будет сильно отставать.
YB
я поняла что вы советуете
YB
ток мы до макс iops не дошли. то есть непонятно во что упираемся
2_
сейчас на текущей базе те запросы которые хотим вынести в BQ работают 5 часов. и да, это неприемлемо и деелать то же самое на реплике - не вариант
c трудом представляю что можно переваривать 5 часов на современном железе без возможности разбивки на подзадания.
СГ
ток мы до макс iops не дошли. то есть непонятно во что упираемся
не одними iops меряется производительность. вам провайдер может обещать 15000 IOPS для async записи, а вам нужна синхронная. Или вообще обещать 15000 для чтения.
YS
ток мы до макс iops не дошли. то есть непонятно во что упираемся
А как Вы это установили? Может, это как раз и есть реальные максимальные IOPS, которые там дают?
Т.е. неплохо было бы сам этот диск протестировать на чтение, когда нагрузки нет — выдаёт он вообще обещанное или нет?
Т.е. неплохо было бы сам этот диск протестировать на чтение, когда нагрузки нет — выдаёт он вообще обещанное или нет?
YB
на нем не бывает что нет нагрузки. можно такой же заказать и там тестить. но это же явно не одно и то же будет
СГ
я поняла что вы советуете
представьте что ваш запрос будет отрабатываться за 5-10 минут. Разве предложение по переезду на бареметал не стоит этого?
YB
представьте что ваш запрос будет отрабатываться за 5-10 минут. Разве предложение по переезду на бареметал не стоит этого?
стоит. рассмотрим этот вариант
YS
на нем не бывает что нет нагрузки. можно такой же заказать и там тестить. но это же явно не одно и то же будет
Ну хорошо, ведь просто можно [очень] кратковременно устроить там пик чтения (хоть с помощью dd).
Выдаст он то, что должен, или нет?
Выдаст он то, что должен, или нет?