Size: a a a

Python для анализа данных

2021 January 14

OO

Oleg Omelchenko in Python для анализа данных
Dafman Grey
Первый раз буду вертеть датасет в пайтоне. Так что не серчайте, джедаи)
вам сюда: @datalytx
Поиск по ключевому слову “Pandas”
Успехов)
источник

DG

Dafman Grey in Python для анализа данных
Oleg Omelchenko
вам сюда: @datalytx
Поиск по ключевому слову “Pandas”
Успехов)
+
источник

MS

Mikhail ADN Smotrin in Python для анализа данных
Александр
Всем привет!
У меня данные из API My Tаrget: https://prnt.sc/wl4f5d. И нужно их привести в нормальный датафрейм.
Делаю так: https://prnt.sc/wl4h8i и теряю id объявления, потому что id вне элемента rows. Как сделать правильно? Готов мириться с названиями через точку, а id объявления хотелось бы выводить в датафрейм. Есть представление, как засунуть id в rows, но это прямо костыль.
Выглядит так, будто то, что отдаёт вам result, пишет в нее не лучшим образом.
Я для запросов, возвращающих json, использую ф-цию(дальше ее частный случай):
def call_to_API (json_url):
   res = requests.get(json_url)
   data = json.loads(res.content.decode('utf-8'))
   indexes=list(data.keys())
   header=list(data[indexes[0]].keys())
   df = pd.DataFrame ({
   })
   df['groupby']=indexes
   for h in header:
       spisok = []
       for t in df['groupby']:
           try:
               spisok.append(data[t][h])
           except:
               spisok.append('0')
       df[str(h)]=spisok
   return df

И получаю датафрейм без потерь полей. Возможно вам будет удобнее сразу записать в result датафрейм отредактированной ф-цией, чем работать с текстом JSON.
источник

N

Na3aga in Python для анализа данных
Выгружаю данные из иснтаграмма себе на бэкэнд, и вот с кодировкой некоторых смайлов проблема
С такими смайлами проблем нету
\U0001317d\U00013217\U00013080
источник

N

Na3aga in Python для анализа данных
А вот смайлы ,у которых unicode_escape выдает такие коды , проблема с кодировкой
\u2b07\ufe0f
источник

N

Na3aga in Python для анализа данных
В чем их разница, и как мне их убирать, или кодироват ьв нормальные смайлики
источник

N

Na3aga in Python для анализа данных
Потому что когда я этот смайлик вставляю в телеграм, копирую потом и записываю в бэк, то всё норм
источник

N

Na3aga in Python для анализа данных
⬇️
источник

АА

ААА ААА in Python для анализа данных
Nikita Baburov
Делаем сейсмику, но обработкой только полевой занимаемся. Попробуй написать в компанию Пангея. Ну либо уже сразу в Газпромнефть выходи
ага, судя по вакансиям и запросам ГПН тянет неплохо, Типа Сбера, только в нефтянке. Партнерки еще у них хорошие.
источник

NB

Nikita Baburov in Python для анализа данных
ААА ААА
ага, судя по вакансиям и запросам ГПН тянет неплохо, Типа Сбера, только в нефтянке. Партнерки еще у них хорошие.
Профессионалы 4.0 - тоже их проект, биржа фриланса отраслевая
источник

АА

ААА ААА in Python для анализа данных
Nikita Baburov
Профессионалы 4.0 - тоже их проект, биржа фриланса отраслевая
это здраво! Понравилось.
источник

s

ssv in Python для анализа данных
Nikita Baburov
Профессионалы 4.0 - тоже их проект, биржа фриланса отраслевая
Есть опыт? Там со стороны берут? Или, по факту, сами у себя заказывают?) Попробовал там потыкаться, но не сложилось...
источник

AK

Alex K in Python для анализа данных
Народ, привет,  кто-нить может подсказать как использую библиотеку scrapy можно выдернуть метки с гугл карты?
источник
2021 January 15

PZ

Pavel Zheltouhov in Python для анализа данных
Alex K
Народ, привет,  кто-нить может подсказать как использую библиотеку scrapy можно выдернуть метки с гугл карты?
это скорее хакерская задача.  на парсинг html или выдергивания из браузера.
если данные выложил кто-то благонамеренный, там какой-нибудь KML-файл будет или что-то более путевое.
Изначально в чем данные? есть сравнительно легкие  способы перевести адреса в координаты.
источник

AK

Alex K in Python для анализа данных
Pavel Zheltouhov
это скорее хакерская задача.  на парсинг html или выдергивания из браузера.
если данные выложил кто-то благонамеренный, там какой-нибудь KML-файл будет или что-то более путевое.
Изначально в чем данные? есть сравнительно легкие  способы перевести адреса в координаты.
она встроенна на сайт мака, они хотят чтоб я все адреса спарсил
https://mcdonalds.ru/restaurants/map
источник

PZ

Pavel Zheltouhov in Python для анализа данных
они?) у них есть Tableau )
источник

AK

Alex K in Python для анализа данных
Pavel Zheltouhov
они?) у них есть Tableau )
это тестовое пытаюсь сделать
источник

AK

Alex K in Python для анализа данных
нету
источник

PZ

Pavel Zheltouhov in Python для анализа данных
70$ в месяц и будет!
студентам бесплатно. 1 год.
там просто текст в поле задаешь и помечаешь, что это GEO. И волшебным образом возникают координаты.
источник

AK

Alex K in Python для анализа данных
Pavel Zheltouhov
70$ в месяц и будет!
студентам бесплатно. 1 год.
там просто текст в поле задаешь и помечаешь, что это GEO. И волшебным образом возникают координаты.
так мне надо хотя б адреса спарсить
источник