Size: a a a

Python для анализа данных

2021 April 23

I

Igor in Python для анализа данных
Ну, если они взаимоисключают друг друга, то просто прибавь один к другому...
источник

DK

Dmitry Kartashov in Python для анализа данных
при простом сложении везде nan выдаёт,
привел к str, заполнил nan и получилось
Всем спасибо, всё было проще, чем ожидалось)
источник

A

Andrey Denisov in Python для анализа данных
np.where или np.select
источник
2021 April 24

PK

Pavel Kabanov in Python для анализа данных
Всем привет! Работаю под виндой. Python 3.9. Запускаю и ломаюсь на google.auth с ошибкой sslerror. Обновил pysslopen, не помогло. В чем может быть проблема?
источник

PZ

Pavel Zheltouhov in Python для анализа данных
Побольше отладки надо.
Но есть и предложения исходя из наиболее вероятных проблем :
- Все ли обновили? Поставили win10?
- запускаете на домашнем интернете без корпоративных фильтров?
- происходит ли эта история в нормальной стране или в странах с ненастоящим интернетом?
источник

PK

Pavel Kabanov in Python для анализа данных
Это рабочая машина под впн. Сейчас не за компом. Чуть позже уточнения выложу
источник

PZ

Pavel Zheltouhov in Python для анализа данных
Ну вот и нашли виноватого - другой отдел.
Неделю можно не работать.
источник

PK

Pavel Kabanov in Python для анализа данных
@PavloZ  тачка под win10, все ли установлено не могу точно сказать, корпоративная машина, запускаю под домашним интернетом. пакеты pandas, numpy работают.
скрипт пытается отправить данные в google bigquery. сначало использовал метод .load_from_dataframe от гугла и в jupyter notebook все работает, но если ставлю на task sheduler и запускаю через .bat, то ломается на авторизации указывая на sslerror. решил попробовать метод .to_gbq и тут сразу в jupyter notebook ломается указывая на sslerror.
ну а дальше уже знаете попробовал поставить pysslopen новый, не помогло. можно ли с этим что-то сделать? только серьезно
источник

PK

Pavel Kabanov in Python для анализа данных
вот такая ошибка вылезает. сейчас и .load_table_from_dataframe не работает
источник
2021 April 25

PK

Pavel Kabanov in Python для анализа данных
Проблема ☝️ идентифицирована и заключается в мануально указанных прокси настройках винды. Изменить я их могу только на время (при перезагрузке auto detect слетает). Есть ли возможность в py-скрипте перед авторизацией в гугл-сервисах указывать прокси в виде auto detect или исключать корп-прокси? Или как-то иначе?
источник

ВЛ

Владислав Литвинюк... in Python для анализа данных
настрой окружениие и не .to_gbq
а от гугла найди метод
источник

ВЛ

Владислав Литвинюк... in Python для анализа данных
key_path = ‘путь к креденшст.json'
os.environ["GOOGLE_APPLICATION_CREDENTIALS"]= key_path
client = bigquery.Client()

# push to bq
job = client.load_table_from_dataframe(
   dataframe, table_id, job_config=job_config
)

или

rows_to_insert = [{"test1":"a","test2":"b","test3":"c","record":{"r1":"d","r2":"e"}}]
errors = client.insert_rows_json(table, rows_to_insert)

тут пишет как создать ключ вначале
https://www.linkedin.com/pulse/1-bq-python-how-connect-big-query-using-choy-siew-wearn?articleId=6645521755618271232
источник

PZ

Pavel Zheltouhov in Python для анализа данных
Вот посмотрите как обычно прокси в коде настраивают
https://stackoverflow.com/questions/43926668/python3-bigquery-or-google-cloud-python-through-http-proxy

Но тут надо поэкспериментировать. Мне не известно отражается ли вообще политика из AD в переменную os.environ.

И, наверное, еще можно в питон добавить этот сертификат от перехватывающего прокси или как там у вас устроено.
Проблема не в том, что прокси не работает, а в том что прокси  ssl подменяет. Браузер обманули, сертификат установили, а питон не обманули.
источник

PZ

Pavel Zheltouhov in Python для анализа данных
что-то у меня в python 3.8 чудес нет. os.environ не содержит прокси.
наверное вы vpn поднимаете и там просто прозрачный перехват ssl происходит на выходе в инет.
разумнее будет заморочиться с сертификатами
источник

ЕС

Егор Сергеевич... in Python для анализа данных
Коллеги, всем добрый день. У мен вопрос: в чате есть эксперты в работе с временными рядами? Есть вопрос о том, как наилучшим образом выровнять два ряда, в одном из которых довольно много пропущенных значений.
источник

D

Dima🐼 in Python для анализа данных
Здравствуйте, подскажите, пожалуйста, где можно взять мп3 файлы с их правильной транскрипцией ?
источник

MZ

Maxim Zadonskiy in Python для анализа данных
Это предобработка, заменить среднем можно или выбрать замену
источник

MZ

Maxim Zadonskiy in Python для анализа данных
Или вообще удали их
источник

IS

Ivan Samorukov in Python для анализа данных
Или resample
источник

ЕС

Егор Сергеевич... in Python для анализа данных
Слишком много пропцщенных. Местами выпадают целые куски. Стандартные методы по типу среднего или медианы явно не подойдут.
источник