D
и тут нужны другие решения
Size: a a a
2021 April 05
D
не oltp бд
D𝔇
Неужели
Смотря что понимать под фильтрацией. Если тупо фулсканом идти по таблице и каждую строку проверять, то это на диск нагрузка. Если по индексу, то нагрузка на ЦПУ при записи, а не при чтении
AE
мое скромное мнение, на таких объемах или в индекс не попали, или вообще не думали о поисках
Речь не о том что попали или не попали, подразумевается что все ок и получение отфильтрованных 10 записей из 10 лямов очень быстра при всех раскладах.
В этом случае тянуть 10 лямов на клиенте(сервис) идея не самая хорошая, ибо получение этих данных по сети скорее всего будет уже дольше, чем отфильтровать запросом в бд
В этом случае тянуть 10 лямов на клиенте(сервис) идея не самая хорошая, ибо получение этих данных по сети скорее всего будет уже дольше, чем отфильтровать запросом в бд
D
Речь не о том что попали или не попали, подразумевается что все ок и получение отфильтрованных 10 записей из 10 лямов очень быстра при всех раскладах.
В этом случае тянуть 10 лямов на клиенте(сервис) идея не самая хорошая, ибо получение этих данных по сети скорее всего будет уже дольше, чем отфильтровать запросом в бд
В этом случае тянуть 10 лямов на клиенте(сервис) идея не самая хорошая, ибо получение этих данных по сети скорее всего будет уже дольше, чем отфильтровать запросом в бд
если совсем грубо
D
то база или вернет тебе с диска 10 записей или вернет все, а ты заберешь 10
D
но тут другой вопрос, а как будут работать хинты, планы для динамических запросов?
AE
Вот тут да, сколько частых разных вариаций запроса будет в итоге
AE
Обычно база такое съедает нормально
MB
Смотря что понимать под фильтрацией. Если тупо фулсканом идти по таблице и каждую строку проверять, то это на диск нагрузка. Если по индексу, то нагрузка на ЦПУ при записи, а не при чтении
Чтобы фильтрануть запись надо вычислить выражение на стороне сервера что недёшево и если большинство записей скипается то ты положишь cpu а не диск, если ты конечно прилетел не из 2000 когда ssd с nvme не было
D𝔇
но тут другой вопрос, а как будут работать хинты, планы для динамических запросов?
А в постгресе нет хинтов :)
Нет хинтов, нет проблемы :)
Нет хинтов, нет проблемы :)
MB
Речь не о том что попали или не попали, подразумевается что все ок и получение отфильтрованных 10 записей из 10 лямов очень быстра при всех раскладах.
В этом случае тянуть 10 лямов на клиенте(сервис) идея не самая хорошая, ибо получение этих данных по сети скорее всего будет уже дольше, чем отфильтровать запросом в бд
В этом случае тянуть 10 лямов на клиенте(сервис) идея не самая хорошая, ибо получение этих данных по сети скорее всего будет уже дольше, чем отфильтровать запросом в бд
Это будет дольше но ты другие запросы не положишь
D
Это будет дольше но ты другие запросы не положишь
да 10 млн записей не пережует приложение
D
сдохнет
MB
да 10 млн записей не пережует приложение
Ну так pagination не зря придумали
D
Ну так pagination не зря придумали
опять же смотря какой
D
Ну так pagination не зря придумали
то есть ты все-таки за работу на стороне sql сервера?
D
потому что pagination в памяти тебе никак не поможет
MB
то есть ты все-таки за работу на стороне sql сервера?
Pagination бесплатно