Size: a a a

KVM (PVE/oVirt etc)

2019 June 25

k

kvaps in KVM (PVE/oVirt etc)
ivdok
Мне нужно шареный ext4 поверх iSCSI, но PVE умеет только равки дисков, решения типа GlusterFS не подходят, потому что надо не шарить кусок ноды для всех, а только одну FS, и clvm под debian 9 я не нашёл, как вкорячить, lvmlockd вообще только в sid есть. Как-то так, куда не поверни - везде жопа
Так-так-так давай по порядку:

> Мне нужно шареный ext4 поверх iSCSI,
типа такого https://habr.com/ru/post/417473/?

> решения типа GlusterFS не подходят, потому что надо не шарить кусок ноды для всех, а только одну FS
В смысле только одну фс?

> clvm под debian 9 я не нашёл, как вкорячить, lvmlockd вообще только в sid есть.
Так ты lvm хочешь или фс, вот тут я вообще запутался
источник

k

kvaps in KVM (PVE/oVirt etc)
К слову, даже если lvm, то proxmox'у не требуется ни clvm, ни lvmlockd он и сам в блокировки неплохо умеет
источник

i

ivdok in KVM (PVE/oVirt etc)
kvaps
К слову, даже если lvm, то proxmox'у не требуется ни clvm, ни lvmlockd он и сам в блокировки неплохо умеет
> типа такого https://habr.com/ru/post/417473/?
Да, и даже получилось, но я могу монтировать почему-то только на праймери диск, подожду как досинкается и ещё раз попробую

> В смысле только одну фс?
Всмысле один ext4 стор для всех, расшаренный. Для бэкапов и ISO. С гластером я смогу только распилить лун на 4 штуки и сделать отказоустойчивость, шарить один и тот же диск архитектурно невозможно.

> Так ты lvm хочешь или фс, вот тут я вообще запутался
LVM вообще не упёрся никак, но ext4 нативно не поддерживает доступ с нескольких нод одновременно, даже со сбросом кэша не синхронизируются директории и файлы. clvm вроде как обеспечивает кластеризацию, но там ещё вроде нужен pacemaker, а жопа чует, что его впихать в дополнение к коросинку - плохая идея
источник

G

George in KVM (PVE/oVirt etc)
ivdok
> типа такого https://habr.com/ru/post/417473/?
Да, и даже получилось, но я могу монтировать почему-то только на праймери диск, подожду как досинкается и ещё раз попробую

> В смысле только одну фс?
Всмысле один ext4 стор для всех, расшаренный. Для бэкапов и ISO. С гластером я смогу только распилить лун на 4 штуки и сделать отказоустойчивость, шарить один и тот же диск архитектурно невозможно.

> Так ты lvm хочешь или фс, вот тут я вообще запутался
LVM вообще не упёрся никак, но ext4 нативно не поддерживает доступ с нескольких нод одновременно, даже со сбросом кэша не синхронизируются директории и файлы. clvm вроде как обеспечивает кластеризацию, но там ещё вроде нужен pacemaker, а жопа чует, что его впихать в дополнение к коросинку - плохая идея
эээм, мультимаунт хочется чтоли??
источник

G

George in KVM (PVE/oVirt etc)
ext4 не умеет в такое, он только на 1 хосте единовременно может быть примонтирован
источник

DB

Dmitry Burlakov in KVM (PVE/oVirt etc)
George
эээм, мультимаунт хочется чтоли??
Очень похоже на то
источник

G

George in KVM (PVE/oVirt etc)
кажется, что хочется lustre или cephfs
источник

i

ivdok in KVM (PVE/oVirt etc)
Для цефа нужен сервер со стором, а у меня есть только iSCSI на неподконтрольном сервере в другом дц
источник

i

ivdok in KVM (PVE/oVirt etc)
На самих нодах PVE всё уже скушано ZFS, и уменьшить его размер проблематично
источник

i

ivdok in KVM (PVE/oVirt etc)
Так что цеф отпадает
источник

k

kvaps in KVM (PVE/oVirt etc)
Чем вариант с NFS не вариант?
источник

k

kvaps in KVM (PVE/oVirt etc)
и чем блоксторадж не угодил?
источник

IF

Irek Fasikhov in KVM (PVE/oVirt etc)
ivdok
Мне нужно шареный ext4 поверх iSCSI, но PVE умеет только равки дисков, решения типа GlusterFS не подходят, потому что надо не шарить кусок ноды для всех, а только одну FS, и clvm под debian 9 я не нашёл, как вкорячить, lvmlockd вообще только в sid есть. Как-то так, куда не поверни - везде жопа
GFS,OCFS
источник

G

George in KVM (PVE/oVirt etc)
ivdok
На самих нодах PVE всё уже скушано ZFS, и уменьшить его размер проблематично
чего?)
источник

i

ivdok in KVM (PVE/oVirt etc)
kvaps
Чем вариант с NFS не вариант?
Неподконтролен сервер, только iSCSI есть
источник

G

George in KVM (PVE/oVirt etc)
kvaps
Чем вариант с NFS не вариант?
в общем то да
источник

G

George in KVM (PVE/oVirt etc)
ivdok
Неподконтролен сервер, только iSCSI есть
на своём примонтировать и поднять nfs сервер
источник

G

George in KVM (PVE/oVirt etc)
но костыль знатный
источник

k

kvaps in KVM (PVE/oVirt etc)
ivdok
На самих нодах PVE всё уже скушано ZFS, и уменьшить его размер проблематично
так бери linstor он в ZFS прекрассно умеет
источник

i

ivdok in KVM (PVE/oVirt etc)
George
на своём примонтировать и поднять nfs сервер
Точка отказа - если нода выйдет из строя, то и хранилище бэкапов vm - тоже
источник