V
ну или fastapi какой-нибудь (+pydantic)
👍
Size: a a a
2019 November 25
2019 November 26
YS
Всем привет. Нужен совет: какой инструмент лучше использовать для получения языка сообщения в мессенджерах? Я сейчас использую https://github.com/indix/whatthelang но он делает ошибки или вообще не может адекватно дать ответ (нужно еще, видимо, записывать процент уверенности в предсказании). Пример можно на видео увидеть.
AC
Коллеги, привет. Где описано negative sampling в word2vec ? Так чтоб кратко и понятно?
AC
(Теория, формулы)
2019 November 27
EE
Всем привет. Нужен совет: какой инструмент лучше использовать для получения языка сообщения в мессенджерах? Я сейчас использую https://github.com/indix/whatthelang но он делает ошибки или вообще не может адекватно дать ответ (нужно еще, видимо, записывать процент уверенности в предсказании). Пример можно на видео увидеть.
привет, есть библиотека langdetect от гугла https://pypi.org/project/langdetect/
YS
привет, есть библиотека langdetect от гугла https://pypi.org/project/langdetect/
Тоже пробовал её. Там посимвольно идёт сравнение.
AK
Тоже пробовал её. Там посимвольно идёт сравнение.
AK
Есть моделька fasttext, можно ее попробовать
AK
whatthelang именно на ней и работает
он на маленькой работает, а по ссылке выше есть еще полная версия
V
Только надо знать, что langdetect и langid очень плохо работают, когда на входе 1-2-3 слова всего. Если заранее известен перечень возможных языков - лучше указать их при использовании, так будет по лучше работать
YS
он на маленькой работает, а по ссылке выше есть еще полная версия
Ок, попробую с большой
RG
Народ, добрый день. Есть набор из 300тыс строк (названия тмц), Строки разложенны по группам. Для каждой группы свои правила/шаблоны для названий. Нужно на основе уже имеющихся строк выводить подсказку при вводе новой строки. Подскажите примеры /технологии.
A
обучить посимвольную rnn
R
Народ, добрый день. Есть набор из 300тыс строк (названия тмц), Строки разложенны по группам. Для каждой группы свои правила/шаблоны для названий. Нужно на основе уже имеющихся строк выводить подсказку при вводе новой строки. Подскажите примеры /технологии.
Elasticsearch completion-suggester
V
Всем привет. Нужен совет: какой инструмент лучше использовать для получения языка сообщения в мессенджерах? Я сейчас использую https://github.com/indix/whatthelang но он делает ошибки или вообще не может адекватно дать ответ (нужно еще, видимо, записывать процент уверенности в предсказании). Пример можно на видео увидеть.
Есть еще polyglot либа
YP
Всем привет. Нужен совет: какой инструмент лучше использовать для получения языка сообщения в мессенджерах? Я сейчас использую https://github.com/indix/whatthelang но он делает ошибки или вообще не может адекватно дать ответ (нужно еще, видимо, записывать процент уверенности в предсказании). Пример можно на видео увидеть.
Есть ещё https://github.com/may-/cnn-ld-tf
