так а что мы обсуждаем то?) сомневаюсь, что именно MPI будет бутылочным горлышком.
ну, по простому... если мой код запустить, на обычном даже 8-миядерном компе, то можно уехать в отпуск на недельки три, вернуться и оно еще будет работать... если на МПИ кластере или ГПГПУ то уже несколько суток... потом оптимизация-оптимизация-оптимизация, ура, мы успеваем собрать модель за ночь )))