Этот тоже видел, здесь нету нормально численной переменной, кроме целевой. Но все равно спасибо.

https://www.kaggle.com/luthfim/steam-reviews-dataset
Что-нибудь такое, может?

возможно, спасибо

а в наташе планируется развитие поддержки дат/времени?

Привет, а кто нибудь знать хорошие тулы для разбиения роу текста (после asr) на фразы/предложения? И чтоб модельки не на википедии, а на чем то более близком к разговорной речи были натренированы?

Можно свою модель обучить по аналогии:
https://docs.nvidia.com/deeplearning/nemo/user-guide/docs/en/main/nlp/punctuation_and_capitalization.html

+

шикарно, спасибо. для английского языка прям из коробки отлично работает

Привет. Есть задача классификации вакансий к 5 классам . Что бы вы выбрали и почему: ливенштейн, суммарное косинусное расстояние между запросом и контрольными токенами каждого класса или что то ещё ?

Ключевые слова - самый надёжный вариант. Проблема описания вакансий в том, что они, помимо требований к сотруднику, содержат описание “плюшек” и могут содержать общее описание деятельности компании. Например “требуется разнорабочий …, будет предоставлен автобус с водителем, бесплатный стоматолог…”. При неаккуратной обработке без фильтрации разделов, водитель автобуса и стоматолог перейдут в требования к вакансии… То же с непрофильными должностями - “Компании по производству печенья требуется программист….”….

понял , спасибо

мне нужно в пространстве коротких текстов склеить выражения, которые обозначают одно и то же, но выражены или глаголом, или существительным. Например, "написать сообщение" и "написание сообщения".
Я попробовал стемминг и пробовал составить правила поверх pymorphy-тегов. Пробовал эмбединги, но мне не надо склеивать синонимы, а только по частям речи склеивать. Кто-то может подскажет какой-нибудь подход?

А что значит склеить?

отнести в один кластер

Ну возьмите сберт)

Заэмбедьте, по вектору фразы найдите ближайшее

Склейте

Можно воспользоваться готовым тезаурусом, где есть частеречные синонимы, типа ruwordnet (для него есть обёртка https://github.com/avidale/python-ruwordnet)
Например, для "написать" (https://www.ruwordnet.ru/ru/search/написать) синонимы такие: ДОПИСЫВАНИЕ, НАПИСАНИЕ, ПИСАНИЕ, ПИСЬМО

Как понимаю парню нужны парафразы

Не надо склеивать синонимы(с)