Короче, вылечил так: создал новый темплейт в директории registration/ , ибо в других не видит просто и рейзит ощибку. Потом переопределил сам мейл вот таким путем:
path('password_reset/',
auth_views.PasswordResetView.as_view(
email_template_name='registration/password_reset_email1.html'
),
name='password_reset'),