Size: a a a

Python для анализа данных

2021 November 19

KM

Konstantin Mohov in Python для анализа данных
systemd timers
источник

KM

Konstantin Mohov in Python для анализа данных
tmux запускается когда вы вручную пишете команду, это же консоль
источник

А

Алексей in Python для анализа данных
ну там смысл в том, что выполнение скрипта не прерывается при завершении сессии
источник

А

Алексей in Python для анализа данных
а есть какое то решение, чтобы проверялся запущен ли скрипт и если нет, то запускал его?
источник

А

Алексей in Python для анализа данных
помню, когда на javascript писал был какой то тул, который позволял передавать ему запускаемый код, а он его администрировал...перезапускал при падении, после перезагрузки и т.д. Хотелось бы такое же для Python
источник

M

Mikhail in Python для анализа данных
cron
если нужно что-то сложнее типа перезапуска, то да, systemd
если нужны ещё и зависимости и веб-интерфейс, то airflow)
источник

KM

Konstantin Mohov in Python для анализа данных
systemd)) там синтаксис простой очень, скрипт для запуска, политка рестарта, таймер для запуска, куда логировать, от кого запускать и все
источник

KM

Konstantin Mohov in Python для анализа данных
изучите
источник

А

Алексей in Python для анализа данных
ну на кроне сейчас всё и висит, airflow для таких задач поднимать не хочется...наверное, всё-таки попробую с systemd
источник

А

Алексей in Python для анализа данных
спасибо, попробую
источник

S

Sergei in Python для анализа данных
Коллеги, привет. Помогите, пожалуйста.
Есть датафрейм такого вида. В столбце ids лежат списки, в столбце dates — словари с датами к некоторым айдишникам. Задача — развернуть списки и словари в строки.
источник

VF

Vladislav Filippov in Python для анализа данных
Через explode как вариант, но словари скорее всего через apply еще нужно прогнать будет.. Просто не понятно что получить хотите в результате
источник

S

Sergei in Python для анализа данных
В результате нужно два столбца: id, дата из словаря (если есть).
Explode списков получился, а вот как из словарей даты вытащить не понимаю
источник

VF

Vladislav Filippov in Python для анализа данных
Типа элемент из списка - это ключ из словаря с датами? Если бы пересечения не было индексов из разных строк, то можно было из словаря список кортежей ключ-значения сделать и после explode по обоим столбцам отфильтровать лишнее..
А так кажется, нужно построчно эксплодить, фильтровать и конкатить в результирующий фрейм.. Либо же как-то обработать то что сейчас в ячейках хранится, чтобы эксплод можно было по всему фрейму сразу сделать
источник

S

Sergei in Python для анализа данных
Благодарю
источник

VF

Vladislav Filippov in Python для анализа данных
Даже интересно стало ) Можно небольшой сэмпл фрейма в pickle?
источник

ТА

Тимур Алиев... in Python для анализа данных
ОК
источник

S

Sergei in Python для анализа данных
источник

VF

Vladislav Filippov in Python для анализа данных
хотя, если правильно понял по скрину, там соответствие между id и датой одинаковое во всех строках. Тогда да кажется можно через кортежи сделать и потом немного фильтрануть и удалить дубликаты
источник

S

Sergei in Python для анализа данных
Для некоторых айди нет записей в словаре
источник