AZ
Мб в вас один из 14 активных запросов сейчас - это какое-то безумие от начинающего SQL разработчика, тогда все можно починить простым внушением
Size: a a a
2020 December 18
AZ
(и настройкой ресурсной группы для пользователя)
2020 December 19
AT
а кто-то из многоуважаемых коллег пробовал RAPIDS акселерацию для спарка? оно ваще там чего-то акселерирует ? или может теперь spark dataframes можно целиком через GPU гонять?
ME
Оно вроде часть операций может ускорить, но каких - хз(
AT
было бы интересно положить датафреймы в GPU и с нечеловеческой скоростью обрабатывать SQL запросы к ним, поражая воображение окружающих
VM
Al T
было бы интересно положить датафреймы в GPU и с нечеловеческой скоростью обрабатывать SQL запросы к ним, поражая воображение окружающих
почему думаешь что прогон через GPU даст кратный прирост?
ME
V. M.
почему думаешь что прогон через GPU даст кратный прирост?
Векторизация, возможно
ME
Сразу на всех ядрах кааак посчитает
AT
ну есть GPU базы данных, на тех объемах которые влазят в GPU они существенно быстрее
GP
Al T
а кто-то из многоуважаемых коллег пробовал RAPIDS акселерацию для спарка? оно ваще там чего-то акселерирует ? или может теперь spark dataframes можно целиком через GPU гонять?
GP
тут рибята ж из нвидии
AT
просим просим !
GP
Al T
было бы интересно положить датафреймы в GPU и с нечеловеческой скоростью обрабатывать SQL запросы к ним, поражая воображение окружающих
Вроде все ускоряет презенташка ж была на митапе классная
GP
орки там паркеты
AT
моя не смотрел, можно ссылочку плз?
GP
Сча найду
VM
тут рибята ж из нвидии
у ребят из нвидии спрашивать про GPU.
ну они как бы ОЧЕНЬ ЗАИНТЕРЕСОВАНЫ чтобы видяшечка тащила всё в n раз быстрее т.е. они предвзято будут судить как по мне
ну они как бы ОЧЕНЬ ЗАИНТЕРЕСОВАНЫ чтобы видяшечка тащила всё в n раз быстрее т.е. они предвзято будут судить как по мне
VM
кто то вообще кластеры через GPU строил?
GP
Al T
моя не смотрел, можно ссылочку плз?