а почему вы думаете, что для этого лучше подойдёт именно spacy?

или не для русского языка нужно, но чтоб тьюториал на русском?

Анализировать нужно будет именно русскоязычные тексты.
А почему Спайси? Ну, потому что я бегло посмотрел возможности и "порог входа" на примере SpaCy, Natasha и Google-сервиса и подумал, что мне легче будет со SpaCy.

Опыта у меня нет никакого в этом деле (если не считать нескольких опытов в  работе с томита-парсером от яндекса) и нахожусь я в самом начале пути. Поэтому, если знающие люди скажут, что Наташа лучше, а, главное, проще в освоении, то могу и на Наташу переключиться.

Т.е. инструмент не принципиален. А задача примерно такая (всё для русского языка): 1) Распознать именованные сущности (топонимы, геообъекты); 2) Найти "географическую связь" между ними, если есть.

Например "Новое шоссе соединит Солнцево и Бутово." -> 1) Распознаем в тексте "Солнцево", "Бутово"; 2) Обнаруживаем "географическую связь" между ними "шоссе соединит".
Насколько я понимаю, задача 1) должна относительно легко решаться существующими библиотеками "из коробки", без дообучения.  А вот задача 2) это как раз то, что они не умеют делать. Я думаю, что задачу 2) можно решить с помощью rule-based подхода.

я там вижу только какой-то дамп пикабу -- это имеешь в виду?

Ну да, всё как ты просил. Мопед не мой.

спасибо
только мне некуда столько распаковывать ..D

Тогда бери обученную модель из статьи

я программист
мне не нужна готовая модель

Всем привет. Кто-нибудь знает библиотеки на питоне, чтобы, например, из слова «1-го» сделать «первого»?

re

🔫 @agusikcomua1 кикнут — вернуть этого пользователя можно только разбаном в настройках чата.

Проголосовавшие за кик:
@alexkuk, @Vladyka_morey, @alexb6949, @dyermakov, @dzhkn42
При поддержке Золота Бородача

всем добрый день! Правильно ли я понимаю, что GPT можно использовать для autocomplete? Предсказывать следующий токен по предыдущим

Можно... Но это, конечно, из пушки по воробьям.

я, кстати, в поисках чат-логов нагуглил такие темы на форумах

https://radiotech.kz/threads/arxiv-chata.312/
https://billwill.ru/threads/arxiv-chata-2.586/

судя по урлам, это какой-то стандартный форумный плагин, так что можно нагуглить еще больше

а что будет тут более подходящим решением?

word2vec, например, погуглите как устроено предсказание слова в гугл-клавиатуре, GPT и прочие, обычно для генирации текста используют, ради одного слова - overkill

Всем привет) нет у кого-нибудь в закромах библиотеки/репы/скрипта, который бы коверкал предложение, например:

1. мне бы в печку дров закинуть -> мне бы выпечку дров закинуть
2. возьми щиты в бой -> возьми ищи ты в бой

Превращение двух-трех слов в одно, одного слова в два-три, как-то так)

Звучит как левенштейн по фонемам

в переводчике туда сюда погонять