Ну вот кстати h5py я особо не пользовалась нигде, кроме как в анализе HiC и вот такого всякого. Предполагаю, что это не единственное его применение 🙈😂
ну вообще h5py просто обертка вокруг hdf5 - очень фичастой библиотеки для работы с матрицами. которую исходно делали физики для своих извращений, емнип. и она поддерживает mpi-io. когда куча mpi процессов параллельно читают/пишут в нее данные. там есть несколько моделей доступа, но это уже детали. собственно h5py параллельный доступ тоже поддерживает.