Интересный проект от Stanford Systems and Networking Research позволяющий с помощью AWS Lambda распараллеливать задачи типа компиляции, object recognition, обработки видео, тестирования и подобных.
GitHub
https://github.com/stanfordsnr/ggДоклад про
gg
на USENIX ATC 2019
From Laptop to Lambda: Outsourcing Everyday Jobs to Thousands of Transient Functional Containers
https://www.youtube.com/watch?v=VVWVN6Czji4Paper
http://stanford.edu/~sadjad/gg-paper.pdfgg
упоминается в другом, более раннем, докладе (скриншот со временем компиляции из него)
Supercomputing as a Service: Massively-Parallel Jobs on FaaS Platforms
https://www.serverlesscomputing.org/wosc2/presentations/s2-wosc-slides.pdfВ нём рассказывается не только про указанный выше
gg
, но и про
ExCamera
(проект для быстрого процессинга видео), который использует
mu
Framework to Run General-Purpose Parallel Computations on AWS Lambda
https://github.com/excamera/muExCamera
и
mu
не развиваются уже.