FF
А где найти доку по обозначениям типов связей?
Size: a a a
2020 July 06
AK
ck
Привет👋. Правильно ли я понял, что navec не умеет с OOV работать? (как FastText например). И, как следствие, синтаксис и морфология в slovnet ничего не выдадут для этих слов. Как это поправить? Приделать словарь и например редакторское расстояние перед этим?
ck
Хочу синтаксис и морфологию стихотворения про Бармаглота)
AK
> navec не умеет с OOV работать?
верно
> slovnet ничего не выдадут для этих слов
что-то выдадут по контексту
верно
> slovnet ничего не выдадут для этих слов
что-то выдадут по контексту
AK
После применения syntax в markup два токена?
AK
Вообще модель обучена на текстах новостей. В примере не текст новости
ck
После применения syntax в markup два токена?
да. Код из документации. Возможно slovnet_bert лучше бы справилась, но ссылку на модель я не нашел. bert от deeppavlov выдал то что на картинке
YB
кстати, у тебя лишняя запятая перед Пырялись
AK
да. Код из документации. Возможно slovnet_bert лучше бы справилась, но ссылку на модель я не нашел. bert от deeppavlov выдал то что на картинке
Вы видимо разбили на предложения, обработали только первое "Выркались." В целом результат корректный одно слово один корень, он не выводится
ck
кстати, у тебя лишняя запятая перед Пырялись
точно. спасибо
YB
ну и конечно излишний uppercase сбивает модели. для поэзии нужно отдельный unknown_case вводить или учить модель на lowercase (но это уменьшит качество).
AI
text —> lowercase —> truecase —> model ?
ck
Вы видимо разбили на предложения, обработали только первое "Выркались." В целом результат корректный одно слово один корень, он не выводится
Убрал переносы строк, заглавные первые буквы. Sentinsize выделил 5 предложений.
ck
А дальше - упорно только одно. У меня есть предположение что дело в OOV
AK
в четвёртой строчке вы берете результат для первого предложения