AL
в чем?
Size: a a a
2018 December 26
b
в том что аналитикам нужно быстро код написать чтобы как можно быстрее выполнялись итерации верчения данных
b
а разрабам на миллион лет стабильную приложуху
b
из за этого и появился jupyter notebook
АМ
В том, что нужно итеративно выполнять последовательные участки кода и быстро видеть результат выполнения. При этом выполненная часть кода должна сохранять свои данные в environment, чтобы можно было к ней обратиться из другого участка кода. Желательно еще чтобы датафреймы рендерились и визуализации
AL
Ну как только количество последовательных участков код переполнит буфер аналитика, можно вернуться к вопросу о правильной структуре кода )
b
АМ
Вообще, есть ощущение, что аналитики и правильная структура кода - это вещи немного несовместимые) Ни разу не видел, чтобы кто-то заморачивался, например, с классами в ноутбуках
AL
Ну тут нет смысла спорить, возрастающая сложность задач сама приведет к этому
Y
в машинном обучении имеет смысл
Y
аналитикам не особо
АМ
Ну и ещё прелесть ноутбуков в том, что по сути это полноценная воспроизводимое описание исследование или эксперимента. С маркдауном, визуализациями. Вот тут можно посмотреть на лучшие примеры: https://github.com/jupyter/jupyter/wiki/A-gallery-of-interesting-Jupyter-Notebooks
AL
В том, что нужно итеративно выполнять последовательные участки кода и быстро видеть результат выполнения. При этом выполненная часть кода должна сохранять свои данные в environment, чтобы можно было к ней обратиться из другого участка кода. Желательно еще чтобы датафреймы рендерились и визуализации
а какие задачи решаются таким подходом?
АМ
а какие задачи решаются таким подходом?
а) Быстрое протипирование сподручных алгоритмов для какой-то автоматизации б) Алгоритмы анализа данных, когда не сразу очевидно, что нужно делать, а сначала нужно провести разведывательный анализ данных
AL
Из практики есть кейсы?
AL
Что лично вы делали
АМ
Вытаскивание данных из различных API (Яндекс.Метрика, Google Analytics), добавление к этому данных из CRM (что требует муторной итеративной отладки в ходе сопоставления данных из двух источников) и затем подготовка отчетов в Excel. Это один из примеров
AL
И все эти данные в энвайроменте а не бд?