M
ar_df = pyarrow.parquet.ParquetDataset() - работает. Только как это в дата фрейм превратить
Size: a a a
2020 December 16
M
В пандасе можно read_parquet(engine= ‘pyarrow’)
Ошибка ядра
SF
Подскажите пожалуйста, как читать в ноутбуке данные parquet. Я установил уже библиотек 10. Выдаёт ошибку ядра. Данные не большие (370 mb)
если это про альфабатл, то пандас эквивалентный все равно 4.5
M
И с другим движком
M
Что такое пандас эквивалентный 4.5?
OC
во время SNA2019 такое что-то было, но не вижу, куда на https://mlbootcamp.ru/ дели форум (там это обсуждали)
OC
на анакондах за последний год такой проблемы нет
M
Спасибо за ответы, буду искать.
M
если это про альфабатл, то пандас эквивалентный все равно 4.5
Да, альфабатл
K
а озу сколько? У меня read_parquet там отлично справляется
M
16г
SD
там разве бейза нет?
IG
Да, альфабатл
Dask ещё))pyspark
IG
Но это конечно отдельная тема))
IG
а озу сколько? У меня read_parquet там отлично справляется
В альфе tsfesh уже пробовал?
K
😂😂 зачем?)
IG
Ну больше фичей богу фичей
K
да нет, это уже какая-то содомия
OC
я, кстати, настроил dask кластер из четырех ноутбуков, но пока не использовал
IG
я, кстати, настроил dask кластер из четырех ноутбуков, но пока не использовал
Заявка на победу прям))