Народ, привет. Запускаю спарк-приложение через livy. У меня используется библиотека
delta.io. Настроил так, что в ливи-контейнере скачиваются зависимости дельта. На спарк-мастере (другой контейнер) ничего не скачивается. Таким образом, при попытке исполнения файла с использованием функций delta, идет ошибка livy.models.SparkRuntimeError: ('ModuleNotFoundError', "No module named 'delta'", ['Traceback (most recent call last):\n', "ModuleNotFoundError: No module named 'delta'\n"]). Может кто-то сталкивался с такой проблемой и обошел ее? PS Думал над опцией "--py-files", но не решаюсь ее сделать -)