AS
Ничего не значащая первая строка, которую просто надо выкинуть
может ее просто отфильтровать до момента показа?
Size: a a a
2020 September 03
H
первая строка может быть любой если вы не сортируете дф
H
поэтому смысл скипа первой строки и не ясен
N
Хидеры небось из цсв засосал, не скипнул при чтении?
SM
Хидеры небось из цсв засосал, не скипнул при чтении?
Да😀
SM
Лучше при чтении короче скинуть
РП
Господа. А подскажите в какую сторону надо рыть?
Ни с того ни с сего. Перестали прилетать письма из питоновского джоба. Сам джоб и блок отправки письма отрабатывает без ошибок.
Либы:
import smtplib
from email.mime.multipart import MIMEMultipart
from email.mime.text import MIMEText
# Настройка отправки почты
FROM = "<e-mail>"
toaddr = ['<e-mail2>']
TO = 'To: ' + ', '.join(toaddr)
# Создаем контейнер для отправки отчета
msg = MIMEMultipart('Mixed')
msg['Subject'] = "Start Load."
msg['From'] = FROM
msg['To'] = ', '.join(toaddr[0:1])
Отправка:
s = smtplib.SMTP('localhost')
s.sendmail(FROM, toaddr, msg.as_string())
Ни с того ни с сего. Перестали прилетать письма из питоновского джоба. Сам джоб и блок отправки письма отрабатывает без ошибок.
Либы:
import smtplib
from email.mime.multipart import MIMEMultipart
from email.mime.text import MIMEText
# Настройка отправки почты
FROM = "<e-mail>"
toaddr = ['<e-mail2>']
TO = 'To: ' + ', '.join(toaddr)
# Создаем контейнер для отправки отчета
msg = MIMEMultipart('Mixed')
msg['Subject'] = "Start Load."
msg['From'] = FROM
msg['To'] = ', '.join(toaddr[0:1])
Отправка:
s = smtplib.SMTP('localhost')
s.sendmail(FROM, toaddr, msg.as_string())
N
Лучше при чтении короче скинуть
Тебя не смутило, что в данных говнецо? Они ж помимо показа ещё куда-то уехать должны будут.
SM
Ничего не съехало, но смутило😀 я прост ньюби со спарком, думал можно проще в рамках него первую строку срезать
SM
Но походу нет
AS
Лучше при чтении короче скинуть
просто укажи при чтении что файл с header
SM
Ага, спасибо
A
Господа. А подскажите в какую сторону надо рыть?
Ни с того ни с сего. Перестали прилетать письма из питоновского джоба. Сам джоб и блок отправки письма отрабатывает без ошибок.
Либы:
import smtplib
from email.mime.multipart import MIMEMultipart
from email.mime.text import MIMEText
# Настройка отправки почты
FROM = "<e-mail>"
toaddr = ['<e-mail2>']
TO = 'To: ' + ', '.join(toaddr)
# Создаем контейнер для отправки отчета
msg = MIMEMultipart('Mixed')
msg['Subject'] = "Start Load."
msg['From'] = FROM
msg['To'] = ', '.join(toaddr[0:1])
Отправка:
s = smtplib.SMTP('localhost')
s.sendmail(FROM, toaddr, msg.as_string())
Ни с того ни с сего. Перестали прилетать письма из питоновского джоба. Сам джоб и блок отправки письма отрабатывает без ошибок.
Либы:
import smtplib
from email.mime.multipart import MIMEMultipart
from email.mime.text import MIMEText
# Настройка отправки почты
FROM = "<e-mail>"
toaddr = ['<e-mail2>']
TO = 'To: ' + ', '.join(toaddr)
# Создаем контейнер для отправки отчета
msg = MIMEMultipart('Mixed')
msg['Subject'] = "Start Load."
msg['From'] = FROM
msg['To'] = ', '.join(toaddr[0:1])
Отправка:
s = smtplib.SMTP('localhost')
s.sendmail(FROM, toaddr, msg.as_string())
на smtp не улетают? что с портом? ребут?
РП
Andrey
на smtp не улетают? что с портом? ребут?
Я как пользователь, не получаю письмо на ящик. А что происходит под капотом не знаю. У меня скорей вопрос, с подобной проблемой идти к админам ноды?
А
логи smtp на ноде лучше посмотреть
AS
Я как пользователь, не получаю письмо на ящик. А что происходит под капотом не знаю. У меня скорей вопрос, с подобной проблемой идти к админам ноды?
как минимум добавить логирование эксепшенов в s/sendmail, если там все чисто, то тогда к админам
РП
логи smtp на ноде лучше посмотреть
Спасибо. Обратился к админам. Оказалось mail transfer agent не может к .ru:25 подключиться
I
Не подскажите, count по конкретному id в спарке возвращает скажем 40 значений, а тот же count в хайве/импале 100 значений. Куда копать?
I
Причем Спарк видит все патриции (show partitions показывает правильное кол-во), но вот данные в них видит не все
N
а spark.sql(«запрос из хайва, который выдает 100») сколько выдает?