AK
А от скольки в паймпарк
Size: a a a
2021 November 03
ЕГ
Да нафиг не нужен тот бустинг, он фуфло
AK
Аа
AK
Ясно
ЕГ
Если там сотни миллионов и прям сильно день заморачиваться, то можно его
AK
аа, ясноъ
AK
спасибо!
AZ
все в питоне сделать, забудьте про спарк
T
+++
AK
Получается spark тип для extract юзают только
AK
Уже неделю провозился)
AZ
для дата инжиниринга (чатик так называется), и тоже только для крупных объемов; преимущество спарка только в масштабируемости, так-то он тормозной и неудобный
T
Ты распиши задачу целиком может тебе он совсем не нужен
AK
Ясна
AK
Попозжа напишу!
ЕГ
Удобный, как раз чтобы засунуть модельку в юдф, например)
ЕГ
На чём-либо другом бесплатном это сильно более стрёмно выглядит или вообще не поддерживается
kk
Ребят, вопрос, я на cron запустил скрипт питон и все сработало...
А как теперь на cron запустить команду, которая должна запускаться из определенной директории ..?
А как теперь на cron запустить команду, которая должна запускаться из определенной директории ..?
AZ
можно написать шелл скрипт который будет идти в нужную директорию, и потом запускать там скрипт
T
Выкинуть крон, взять systemd timer и там есть куча опций для настройки. В качестве бонуса сможет нормально логи читать через journalctl