Size: a a a

AI / Big Data / Machine Learning

2020 February 27

СК

Сергей Котов in AI / Big Data / Machine Learning
У меня есть ограничения в датасетах картинок не как в MNISTе а сожалению
источник

СК

Сергей Котов in AI / Big Data / Machine Learning
Я слышал что на предобученных якобы можно частично решить проблем с недобльшим датасетом
источник

СК

Сергей Котов in AI / Big Data / Machine Learning
Спасибо Ольга
источник

A

Alexei in AI / Big Data / Machine Learning
Сергей Котов
Так. А что посоветуешь? Самому построить?
Искать похожую модель с похожим тренированным  датасетом
источник

A

Alexei in AI / Big Data / Machine Learning
Сергей Котов
У меня есть ограничения в датасетах картинок не как в MNISTе а сожалению
Аугментации сделай к пикчам
источник

A

Alexei in AI / Big Data / Machine Learning
Сергей Котов
Я слышал что на предобученных якобы можно частично решить проблем с недобльшим датасетом
Можно, но чем релевантней задача на которой была натренирована модель, тем лучше. Никто не даст ответа хорошо получится или нет на 100%
источник

СК

Сергей Котов in AI / Big Data / Machine Learning
Спасибо Алексей Большое
источник

A

Alexandr in AI / Big Data / Machine Learning
Сергей Котов
Я новичок в этом деле. Вопрос такой:
В керасе есть всем известная MobileNet сетка и мне скажем необходимо для моей задачи, НЕ СВЯЗАННАЯ С Face Recognition, всего 2 классификатора могу ли я использовать эту сеть, дообучив на своих датасетах и убрав в последнем слое до 2 нейронов
Да,можно,я на бутылках(20 классов) и на кошках/собаках ее обучал
источник

СК

Сергей Котов in AI / Big Data / Machine Learning
Спасибо Александр большое.
источник

A

Alexander in AI / Big Data / Machine Learning
Ребят, вот скажем у меня есть модель на Берте. Какие есть способы сделать deployment этой модели в продакшен? Её же невозможно использовать со спарком (pyspark или scala)...
источник

RB

Radion Bikmukhamedov in AI / Big Data / Machine Learning
bert-as-a-service
источник

RB

Radion Bikmukhamedov in AI / Big Data / Machine Learning
т.е. деплоить как отдельный сервис и ходить в него за признаками
источник

A

Alexander in AI / Big Data / Machine Learning
Radion Bikmukhamedov
bert-as-a-service
источник

RB

Radion Bikmukhamedov in AI / Big Data / Machine Learning
да
источник

A

Alexander in AI / Big Data / Machine Learning
Я как понял он только для Sentence Encoding/Embedding.
источник

RB

Radion Bikmukhamedov in AI / Big Data / Machine Learning
Alexander
Я как понял он только для Sentence Encoding/Embedding.
нет, можно и для каждого слова доставать векторы, почитай доки. ничто не мешает развернуть, например, на flask свою версию эмбеддингов, кстати
источник

A

Alexander in AI / Big Data / Machine Learning
Radion Bikmukhamedov
нет, можно и для каждого слова доставать векторы, почитай доки. ничто не мешает развернуть, например, на flask свою версию эмбеддингов, кстати
А его можно запустить на PySpark или Hadoope?
источник

A

Alexander in AI / Big Data / Machine Learning
Radion Bikmukhamedov
нет, можно и для каждого слова доставать векторы, почитай доки. ничто не мешает развернуть, например, на flask свою версию эмбеддингов, кстати
И ещё вопрос. Можно ли просто свой BERT скрипт завернуть в Docker и далее закинуть в Hadoop кластеры?
источник

P

Pavel in AI / Big Data / Machine Learning
привет всем
https://take.ms/VEMU7
применяю к матрице нормализацию sklearn.preprocessing.normalize это функцией, согласно всем манам что я читал, нормализация это приведение значений между 0-1. Почему у меня не приводиться к такому диапазону?

спасибо
источник

VC

Vadim Chashechnikov in AI / Big Data / Machine Learning
Pavel
привет всем
https://take.ms/VEMU7
применяю к матрице нормализацию sklearn.preprocessing.normalize это функцией, согласно всем манам что я читал, нормализация это приведение значений между 0-1. Почему у меня не приводиться к такому диапазону?

спасибо
0-1 min max
источник