Size: a a a

Python для анализа данных

2021 November 15

M

Mikhail in Python для анализа данных
источник

M

Mikhail in Python для анализа данных
слышал что компрехеншены сильно оптимизированы в питоне)
источник

M

Mikhail in Python для анализа данных
забавно что со строками быстрее даже, я думал будет медленнее
источник

M

Mikhail in Python для анализа данных
если дальше масштабировать — только распараллеливать
источник

I

Igor in Python для анализа данных
data = {'A':['X','Y','Z'], 'B':'Xadaf', 'C':['X','Y']}
pd.DataFrame.from_records(
   [(key,value) for key in data for value in (data[key] if type(data[key])==list else [d[key]])],
)
источник

IS

Ilya Shutov in Python для анализа данных
вот такие входные данные, обезличенный формат

времени отводится 1-3 секунды
источник

v

v in Python для анализа данных
источник

KM

Konstantin Mohov in Python для анализа данных
так без разницы строка или нет, ключ в словаре хешируется. Именно поэтому он immutable
источник

IS

Ilya Shutov in Python для анализа данных
спасибо, надо поглядеть
источник

I

Igor in Python для анализа данных
with open('./nested_data.txt', 'r') as f:
   data = f.readlines()

pd.DataFrame.from_records([(x.split('=')[0], y) for x in data for y in x.split('=')[1].split(';')])
источник

I

Igor in Python для анализа данных
до 3 с
источник

IS

Ilya Shutov in Python для анализа данных
спасибо
источник

IS

Ilya Shutov in Python для анализа данных
Нет, достаточно.
Михаил, спасибо.
источник

AD

Andrew Dakhnovsky in Python для анализа данных
суммарно около 2-х секунд
ну и предсказуемо конвертация в пандас-объекты занимает больше всего времени
источник

IS

Ilya Shutov in Python для анализа данных
Всем спасибо. Ответы прекрасные и исчерпывающие
источник

AD

Andrew Dakhnovsky in Python для анализа данных
шота ты слабовато сегодня
я ждал ответа в стиле "смарите лахи, а в чюдоязыке РРР есть функция искаропки которая делает такое за 0.00000001 пикосекунду"

я разочарован
источник

IS

Ilya Shutov in Python для анализа данных
Зря так…
источник

AD

Andrew Dakhnovsky in Python для анализа данных
да я пошутил
надеюсь никого не обидел )))
источник

IS

Ilya Shutov in Python для анализа данных
FYI
На R получил быстрее раз в 5-7, но надо было на питоне — фрагмент унаследованных модулей.
Но это неважно… время поджимало с экспериментами. Ответы были очень хорошие. Для разочарований нет ни одного повода
источник

h

helby in Python для анализа данных
Так?
источник