h
думаю ускорить еще немного и вердикты писать
Size: a a a
2019 November 21
h
использовать поточный парсер
НК
ребят, а скорость детекта языка 300кк статей в нс нормально ?
какая скорость не понял?
h
какая скорость не понял?
получается что 300кк/нс
h
но с поточным парсером все равно быстрее будет же
F
какая скорость не понял?
Ok boomer
h
зарплата растет пропорционально скорость детекта языка
НК
да уж. 300кк чего? не понял вообще )
h
я тоже..
h
ты че пес, 300кк чего??
НК
ты скажи в файла ) мы тут в файлах измеряем
IP
ага, по
<ᅠ
А нейронку можно юзать в дата контесте?
НК
Примерно 85-90% это новости на русском.
F
Вообще - все новости)
Неважно, какого качества)
Неважно, какого качества)
N
Прблема на самом деле это отделить новостной контент от авторских страничек или информационных страничек на этом же сайте. Например:
Новость
https://www.investopedia.com/cisco-stock-declines-as-guidance-shows-downside-risk-4776895
Не новость
https://www.investopedia.com/articles/basics/06/invest1000.asp
Не новость
https://www.investopedia.com/contributors/97574/
Новость
https://www.investopedia.com/cisco-stock-declines-as-guidance-shows-downside-risk-4776895
Не новость
https://www.investopedia.com/articles/basics/06/invest1000.asp
Не новость
https://www.investopedia.com/contributors/97574/
НК
не думаю, что уж так сложно. такое сплош и рядом. даже на ленте ру например там идут новости и публикации на всякое
IB
Прблема на самом деле это отделить новостной контент от авторских страничек или информационных страничек на этом же сайте. Например:
Новость
https://www.investopedia.com/cisco-stock-declines-as-guidance-shows-downside-risk-4776895
Не новость
https://www.investopedia.com/articles/basics/06/invest1000.asp
Не новость
https://www.investopedia.com/contributors/97574/
Новость
https://www.investopedia.com/cisco-stock-declines-as-guidance-shows-downside-risk-4776895
Не новость
https://www.investopedia.com/articles/basics/06/invest1000.asp
Не новость
https://www.investopedia.com/contributors/97574/
по заголовку очень легко понять