да. Векторы из текстового файла. Размерность ~миллион
на спарках будет проблема, мультипликация и тп больших штук у него наивная и тебе придется самому делать ее фактически.
если нужно готовое чтоб просто накатать наколенке вычисление разных простых арифметических выражений - то scalding супер подойдет (ну там прям прочитаешь большую матрицу из файла и перемножишь и он ок живет)
но может это не то что хочется