А по-другому никак. Но вообще, один из контрибьюторов нашёл причину одной из утечек, так что, возможно, будет получше с этим.
Самая проблема утечек — медиафайлы, и исправлять это не так просто, тем более, что медиафайлов очень много в Telegram обычно.