Мне все нравится, зря я применил такое неудачное слово) Я скорее имел ввиду разделение достижений на:
1. Не было, потому-что не на чем реализовать
2. Не было даже идей, лежащих в основе. Даже если был инструмент.
Вот как раз бустинг и рандом форест, вроде как, появились сразу, как компы смогли их считать.
Но вообще да, согласен, есть такое. Вообще сейчас заметил такую особенность, что чем более древним является некоторый алгоритм, тем, как правило, более серьезная теория за ним стоит.
К сожалению, правда, все эти более сложные с математической точки зрения алгоритмы, как правило, требуют выполнения большого кол-ва разных предпосылок, соблюсти которые в реальной жизни зачастую очень сложно. А деревьям, как раз, хоть бы хны.