Там про отстранить непосредственно как решение ничего же нет, сказано про весь аппарат. "работаем плохо, нужно менять и принять меры". "иначе раскол и шатание".
Не внимательно читали: «Сталин слишком груб, и этот недостаток, вполне терпимый в среде и в общениях между нами, коммунистами, становится нетерпимым в должности генсека. Поэтому я предлагаю товарищам обдумать способ перемещения Сталина с этого места и назначить на это место другого человека, который во всех других отношениях отличается от тов Сталина только одним перевесом, именно, более терпим, более лоялен, более вежлив и более внимателен к товарищам, меньше капризности. Это обстоятельство может показаться ничтожной мелочью. Но я думаю, что с точки зрения предохранения от раскола и с точки зрения написанного мною выше о взаимоотношении Сталина и Троцкого, это не мелочь, или это такая мелочь, которая может получить решающее значение.»