Интересный проект от Stanford Systems and Networking Research позволяющий с помощью AWS Lambda распараллеливать задачи типа компиляции, object recognition, обработки видео, тестирования и подобных.
GitHub
https://github.com/stanfordsnr/ggДоклад про
gg на USENIX ATC 2019
From Laptop to Lambda: Outsourcing Everyday Jobs to Thousands of Transient Functional Containers
https://www.youtube.com/watch?v=VVWVN6Czji4Paper
http://stanford.edu/~sadjad/gg-paper.pdfgg упоминается в другом, более раннем, докладе (скриншот со временем компиляции из него)
Supercomputing as a Service: Massively-Parallel Jobs on FaaS Platforms
https://www.serverlesscomputing.org/wosc2/presentations/s2-wosc-slides.pdfВ нём рассказывается не только про указанный выше
gg, но и про
ExCamera (проект для быстрого процессинга видео), который использует
muFramework to Run General-Purpose Parallel Computations on AWS Lambda
https://github.com/excamera/muExCamera и
mu не развиваются уже.