Size: a a a

2020 September 14

K

KrivdaTheTriewe in Data Engineers
Вам в рантайме передавать что мешает конфиг ?
источник

SS

Sergey Sheremeta in Data Engineers
а, понял, сорри
источник

T

T in Data Engineers
Sergey Shushkov
А персист куда в память или на диск пишите?
Над посмотреть че там мой индус понаписал, сейчас не помню может даже и персист подойдёт просто он наговнокодил
источник
2020 September 15

Ж

Жмака in Data Engineers
Привет. Кто то сталкивался с проблемами версий с sklearn2pmml? Создается пайплайн с xgboost и затем надо сохранить  pmml и pkl. Версии следующие: python 3.6, sklearn 0.21.3, sklearn2pmml 0.49.0, joblib 0.14.1, sklearn_pandas 2.0.0, pandas 1.1.1, numpy 1.19.1. Проблема в том, что нужно в mapper оставить вариант invalid_value_treatment="as_missing", который в новых версиях выбрасывает ошибку.
источник

Ж

Жмака in Data Engineers
Привет. Кто то сталкивался с проблемами версий с sklearn2pmml? Создается пайплайн с xgboost и затем надо сохранить  pmml и pkl. Версии следующие: python 3.6, sklearn 0.21.3, sklearn2pmml 0.49.0, joblib 0.14.1, sklearn_pandas 2.0.0, pandas 1.1.1, numpy 1.19.1. Проблема в том, что нужно в mapper оставить вариант invalid_value_treatment="as_missing", который в новых версиях выбрасывает ошибку.
источник

AZ

Anton Zadorozhniy in Data Engineers
Жмака
Привет. Кто то сталкивался с проблемами версий с sklearn2pmml? Создается пайплайн с xgboost и затем надо сохранить  pmml и pkl. Версии следующие: python 3.6, sklearn 0.21.3, sklearn2pmml 0.49.0, joblib 0.14.1, sklearn_pandas 2.0.0, pandas 1.1.1, numpy 1.19.1. Проблема в том, что нужно в mapper оставить вариант invalid_value_treatment="as_missing", который в новых версиях выбрасывает ошибку.
это известная проблема, клиент Виллу привлекал чтобы с этим бороться, вроде решилось только заменой инвалид данных на нулы (но это не точно)
источник

AZ

Anton Zadorozhniy in Data Engineers
источник

Ж

Жмака in Data Engineers
Его предложение мне не очень подходит. Пока только с флагом "as_is" это работает и только с версией 0.49.0. Виллу предлагает только апгрейдить его библиотеку, но проблема создается новпя с joblib, который выкидвает ошибку о старых импортах. Получается какая то бесконечная рокировка с веосиями, чтобы найти работающий вариант
источник

AZ

Anton Zadorozhniy in Data Engineers
Жмака
Его предложение мне не очень подходит. Пока только с флагом "as_is" это работает и только с версией 0.49.0. Виллу предлагает только апгрейдить его библиотеку, но проблема создается новпя с joblib, который выкидвает ошибку о старых импортах. Получается какая то бесконечная рокировка с веосиями, чтобы найти работающий вариант
я бы написал Виллу, наверняка он решал такое для других клиентов
источник

AZ

Anton Zadorozhniy in Data Engineers
он клиентам шустро довольно отвечает, а если у вас в опенсорсе - просто тэгните его из вашего ишью
источник

Ж

Жмака in Data Engineers
Спасибо. Попытаюсь еще раз
источник

AZ

Anton Zadorozhniy in Data Engineers
Жмака
Спасибо. Попытаюсь еще раз
не надо его баловать, он же деньги берет за свой софт, пусть работает! :)
источник

Ж

Жмака in Data Engineers
Мы ему не платим, но альтернативу pmml пока не нашли
источник

AZ

Anton Zadorozhniy in Data Engineers
Жмака
Мы ему не платим, но альтернативу pmml пока не нашли
ну значит у вас в открытом коде, просто тэгните его в своей ишшью
источник

AZ

Anton Zadorozhniy in Data Engineers
ну или если не на гитхабе то наверное все-таки письмом
источник

Ж

Жмака in Data Engineers
Anton Zadorozhniy
ну значит у вас в открытом коде, просто тэгните его в своей ишшью
Так и сделаю
источник

AZ

Anton Zadorozhniy in Data Engineers
можете сюда ишью прислать, интересно думаю будет многим
источник

AZ

Anton Zadorozhniy in Data Engineers
кстати если кому надо строить PMML pipeline то теперь по крайней мере для скоринга есть PMML4S с лицензией Apache, если вы пишете коммерческий софт с закрытым кодом - то можно не платить Виллу)
источник

Ж

Жмака in Data Engineers
Anton Zadorozhniy
можете сюда ишью прислать, интересно думаю будет многим
Написал ему. Жду ответа. Пока решение работает с флагом "as_is". Кстати, мой датасатанист сказал, что Виллу уже как то предложили оплату, потому что много джобов с его библиотекой и он написал "отвалите"
источник

Ж

Жмака in Data Engineers
источник