VM
есть конкретные результаты и конкретная статистика ошибок
Size: a a a
2021 April 15
N
а какая разница, какие результаты? проверялось, что выборки сбалансированы по числу переходных/непереходных примеров? а то просто от балды можно сказать, что тут хуже, потому что англ, а не потому что примеры заковыристей
VM
перепроверил случаи про падеж
походу mystem действительно не делает предположений, какой падеж более вероятен, а просто перечисляет все возможные в каком-то своем захардкоженном порядке (от дательного до именительного), так что м.б. можно будет исправить эту проблему вычеркиванием из обучения неоднозначных случаев
походу mystem действительно не делает предположений, какой падеж более вероятен, а просто перечисляет все возможные в каком-то своем захардкоженном порядке (от дательного до именительного), так что м.б. можно будет исправить эту проблему вычеркиванием из обучения неоднозначных случаев
VM
не нужно балансировать выборки по числу переходных и непереходных
итоговая программа есть генератор, который штопает заголовки один за другим, и из них взяты подряд N штук, из которых 50% являются определенной ошибкой, которую значит если исправить, то кол-во ошибок уменьшится в два раза
итоговая программа есть генератор, который штопает заголовки один за другим, и из них взяты подряд N штук, из которых 50% являются определенной ошибкой, которую значит если исправить, то кол-во ошибок уменьшится в два раза
DS
переходность - это частный случай, там еще миллион и одно слабое место может быть, о которых мы не подумали (как те же наречия, о которых уже выше говорилось)
VM
а для обучения по англ я брал тоже заголовки, только не из Ленты, а с форума
VM
речь о миллионе слабых мест не идет
VM
есть конкретика
DS
тогда я не понимаю в чем вопрос, про переходность вроде уже все рассказали
N
да, не нужно
если вы готовы не предъявлять языку претензии
если вы готовы не предъявлять языку претензии
VM
в том, есть ли какая-то тулза, которая бы давала больше инфы, чем, например, приведенные выше tree-tagger и textblob, потому что на примере первая выдает мало, а вторая ошиблась, а mystem выдает много и правильно
DS
объяснили же уже что в самом английском языке не существует "больше инфы" о морфологии
DS
нет там падежей и родов
DS
если хотите семантические и синтаксические роли, то нужны отдельные парсеры под это, но с приличным качеством для семантики точно нет
VM
я не спорю
VM
кто не понял вопрос, хотел объяснений, и я объяснил, привел примеры
что такое несуразица, какой рез-тат и т.п.
что такое несуразица, какой рез-тат и т.п.
VM
если есть тулзы чтоб определять "семантические и синтаксические роли", которыми бы я мог воспользоваться вместо пос-теггеров, будет замечательно
MK
Ладно, а есть ли библиотеки чтобы просклонять 'федеральный конституционный закон'? т.е. просклонять "закон", чтобы остальные прилагательные были согласованными?
VV
ну всегда можно платно гнать через Грамарли 🙂 если проект профитабл. И править несуразицы
VV
а если "поиграться" - то тогда нужно артиклз по ИИ-конфам 10летней давности поднять - там все описано, про 27 семантических ролей русккого языка и эксперименты. Нахрапом из г-на и песка и глины можо собрать только участкового, согласно поговорке. Это правда