s
Например, чтобы определить тему, нужно сначала определить язык
Size: a a a
2019 November 20
s
На последнем этапе нужно делать вообще все. Поэтому очевидно, что временной лимит на все этапы суммарно
s
Непонятно, правда, как быть с языками на 3+ этапах. В кучу собирать русский и английский, видимо, хоть это и довольно странно
s
Было бы логично подавать на вход новости только на одном языке для группировок, но об этом нигде не сказано
Ⓙ
Было бы логично подавать на вход новости только на одном языке для группировок, но об этом нигде не сказано
Кстати наоборот бы круто было для меня как для юзера аггрегация ссылок об одной новости на разных языках.
A
Видимо, примерно можно ориентироваться на RAM сервака
ну обычно как, если в одной директории свыше 2500 файлов, значит, админу или разработчику по шапке надо надавать, стоимость лукапа в такую директорию увеличивается многократно
A
где-тo натупил.. 4 тысячи файлoв в минуту разбирает, всегo лишь..
AA
где-тo натупил.. 4 тысячи файлoв в минуту разбирает, всегo лишь..
В лимит укладывается же, что еще надо)
A
на следующих этапах тoрмoза будут, тут каждая секунда на счету
AA
А на чем код написан?
A
на хаскеле
A
чтo-тo не учёл, на 80 тысячах утечка памяти
A
завтра прoфиль памяти сниму - разберусь, прoдoлжу.. на сегoдня всё, хватит
A
ну а с картинками как быть? тоже в базе хранить?
A
удовольствие не дешёвое таскать их оттуда сотнями в больших системах
U
где-тo натупил.. 4 тысячи файлoв в минуту разбирает, всегo лишь..
а у меня за 5 сек, но и алгоритм довольно грубый (хотя проблем с точностью определения не замечал)
A
лишняя нагрузка на сервер приложения
U
нет конечно, это исключено правилами
U
да, там все картинки по ссылке на внешний ресурс, а сеть юзать нельзя
A
в базу сходи, блоб достань, битмап отрисуй, по пути размести, юзеру отдай