AM
а как количественно оценить популярность?
Size: a a a
2020 January 30
AM
допустим, собрали с 30 людей интервью. узнали инсайты
AM
как замасштабировать ?
AM
есть год истории и миллионы комментов
M
давайте вброшу задачку: нужно понять какие есть темы в комьюнити и как они развиваются во времени (аля гугл тренды). данных оченб много, не перечитать. что будете делать?
Temporal LDA
AI
есть год истории и миллионы комментов
исторически нужно (зачем тренды исторически) или текущее?
AI
допустим, собрали с 30 людей интервью. узнали инсайты
Получите тренды, соберете машинно объем по ним.
R
Провести кластеризацию (темы), измерять динамику кластеров по времени
AM
Temporal LDA
Пока вот такой подход тоже а голове держу
AM
Провести кластеризацию (темы), измерять динамику кластеров по времени
Ок. Как обучать ? На всем объеме данных ?
AM
Как количество кластеров определить ?)
M
Пока вот такой подход тоже а голове держу
можете взять обычный LDA, выделить темы на всей истории, присвоить их сообщениям и тупо строить в динамике
AM
Как следить за новыми трендами ?
AM
Переобучать каждый раз ?
M
как вариант
нормальные реализации LDA быстро работают на нескольких ядрах
нормальные реализации LDA быстро работают на нескольких ядрах
AM
Вот вышла новость про какого нить актера и она во flo понеслась
AM
До этого такого топика не было
M
какой объем сообщений в день?
M
и какое время отклика нужно?
AM
Ну раз в день считать норм