a6
Говорить за иб — оффтоп, а сраться за уазики — нет?)
За иб и девсекпесов лучше наверное в
@CyberJobsRussia
@CyberJobsRussia
Size: a a a
2020 December 05
t
Хз о каких уазиках ты говоришь, но говорить о том как ломать циску точно оффтоп)
t
За иб и девсекпесов лучше наверное в
@CyberJobsRussia
@CyberJobsRussia
Тут лутше.
O
Ну ок, то есть позиция "если не так как у меня - то неправильно" действительно присутствует.
СХ
а если у тебя python/плюсы/что угодно еще не single binary? а если таски требуют разного несовместимого окружения?
с++ прекрасно ихолируется по пользователю в systemd, и ему можно выделить параметрымемлока в системе
O
а окружение как возить будешь?)
СХ
с++ прекрасно ихолируется по пользователю в systemd, и ему можно выделить параметрымемлока в системе
а вот контейнеру они в полном мере не выдаются
СХ
а окружение как возить будешь?)
а их надо часто возить?cuda так часто обновляется?
BD
а окружение как возить будешь?)
как вариант пакером образы с окружением собирать)
O
а их надо часто возить?cuda так часто обновляется?
а почему сразу cuda? Ты кажется пытаешься опять все напихать в твои конкретные условия и не хочешь принять то, что бывает по-другому. А оно бывает. Ну и да, бывает даже несовместимые библиотеки и даже libc тасками.
СХ
а почему сразу cuda? Ты кажется пытаешься опять все напихать в твои конкретные условия и не хочешь принять то, что бывает по-другому. А оно бывает. Ну и да, бывает даже несовместимые библиотеки и даже libc тасками.
да, но это делается на стейдже а не на проде
O
как вариант пакером образы с окружением собирать)
это уже начинает походить на "зачем нам один набор тулов, давайте другой использовать". Вкусовщина же.
O
да, но это делается на стейдже а не на проде
Нет.
O
Всмысле "нет" в том, что у тебя два разных таска от двух разных команд на одном кластере могут в проде иметь противоречащие зависимости.
СХ
Нет.
не нет а да, покажи мне хотя бы 4 джобы в пэспарк которые смогли нормально отработать хотя бы с 256 рамы, и их непытались переписывать на скалупотом
O
Поверх больших данных обычно далеко не одна команда гоняет таски.
СХ
Всмысле "нет" в том, что у тебя два разных таска от двух разных команд на одном кластере могут в проде иметь противоречащие зависимости.
у каждой команды свои серваки и свои окружения, ибо процы пока плохо умеют с iowait бороться
O
И нет блин, не весь мир пишет на яве и прочее)
O
у каждой команды свои серваки и свои окружения, ибо процы пока плохо умеют с iowait бороться
да? ты петабайты данных тоже клонить будешь между окружениями?
СХ
И нет блин, не весь мир пишет на яве и прочее)
да, он либо на jvm либо на cuda. либо говнокод который работает на 30-120 гб оперативы