EO
Может на этапе?
Финтех, запросто может
Size: a a a
2019 April 30
GM
@Anc1ent Ходу масти! Чего трубу не берём?
оу, я тут болел малость, вообще не до телефона было
S
есть мааленькая проблемка - если что-то развалилось, очень сложно что-то сделать, а есть неилюзорный шанс что одна и та же файловая операция развалит тебе все реплики
Именно
EB
ну в теории хорошо ложится на кейс типа берем коробку на 200 тб льем туда файлики которые жмутся и которые можно потерять когда вся коробка развалится и ее надо будет поменять на новую
Фейсбук вроде примерно так и работает, ЕМНИП.
VS
Фейсбук вроде примерно так и работает, ЕМНИП.
такой подход в целом экономит нервы - когда твоя система легко переживает потерю какой-нибудь одной отдельно взятой коробки
VS
лучше какого-то процента отдельно взятых коробок
VS
в случаи со стораджами даже восстановление автоматизируется. Коробка ушла в себя и не вернулась или слишком много ошибок дает - выводится из работы автоматикой, автоматика же делает тикет на инженеров в дц пойти потыкать мертвеца палочкой, а пока они тыкают - берется новая коробка из резерва и наливаются данные обратно с одной из реплик.
DV
в случаи со стораджами даже восстановление автоматизируется. Коробка ушла в себя и не вернулась или слишком много ошибок дает - выводится из работы автоматикой, автоматика же делает тикет на инженеров в дц пойти потыкать мертвеца палочкой, а пока они тыкают - берется новая коробка из резерва и наливаются данные обратно с одной из реплик.
я не использую реплики/зеркала на уровне фс - понятно, что если мета сломана, то никак не поможет. Ничего не мешает резервировать ноду на уровне приложения, например с minio.
VS
я не использую реплики/зеркала на уровне фс - понятно, что если мета сломана, то никак не поможет. Ничего не мешает резервировать ноду на уровне приложения, например с minio.
а я не про уровень ФС, а про уровень приложения. К сожалению с btrfs к проблеме может привести паттерн нагрузки и у тебя обе репилки сложатся разом
VS
в этом некоторая проблема
C
а кто что скажет на счет XFS 🤔
DV
Там раньше были регрессии на мелких файлах, вроде в 3.18 где-то их чинили, с тех пор не запинался. Fsck/фикс на терабайтный+ раздел требовал раньше неприлично много памяти вплоть до вкручивания в аврале.
S
S
а кто что скажет на счет XFS 🤔
Если у вас много мелких файлов, то когда останется мало места, вы узнаете, что такое XFS 😂
S
Там раньше были регрессии на мелких файлах, вроде в 3.18 где-то их чинили, с тех пор не запинался. Fsck/фикс на терабайтный+ раздел требовал раньше неприлично много памяти вплоть до вкручивания в аврале.
Там не в размере дело в целом, а в количестве. И не в регресии, а в стоимости определенных операций на FS
C
Если у вас много мелких файлов, то когда останется мало места, вы узнаете, что такое XFS 😂
его в вк юзают для фоток юзеров🤔
S
его в вк юзают для фоток юзеров🤔
Это не аргумент, если знать, что в вк с таких разделов ничего не удаляется.
S
слишком мало компаний которые могут себе позволить не удалять копящиеся данные
C
понял🙁
VS
ВК о своей инфре и подходах рассказывают мало, но есть некоторые сомнения в том что они прям те, на кого надо ровняться