Извиняюсь, туплю. Нет, в вашем кейсе выше, нода в качестве сервера не используется.
У nuxt есть вариант target static, я его не использовал, мне обычно нужен SSR. Но как я понимаю это и есть то, что вам нужно.
Т.е. вы заранее билдите статику и можете точно также скормить путь до нее nginx'у.
Тут подробнее -
https://nuxtjs.org/blog/going-full-static