Всем доброго вечера!
Завтра в 19:00 планируется интересный вечер.
Сначала @AlexErofeev расскажет про успех компании Maluuba (поглощенной микрософтом) в обучении агента _идеальной_ игре в Ms. Pac-Man.
Затем @Parilo расскажет зубодробительную статью про то, как правильно соединять model-free и model-based updates в робототехнических приложениях.

Напоминаю, что если у Вас нет бейджика, то регистрироваться по ссылке в шапке канала нужно до полночи сегодня! 🙂

А вот и подробности того, как обучали бота, выигравшего Денди в Dota2 в режиме 1v1. Обязательно прочитайте, там простой английский.

Самое важное вообще - что обучение проходило на игре бота с самим собой, как и в AlphaGo. И результаты за такой короткий период просто невероятные. Я как-то недооценил ребят из OpenAI, а они очень большие молодцы. Жду пока сделают бота, играющего 5v5,  который разнесет Team Liquid на кусочки!

https://blog.openai.com/more-on-dota-2/

Надо понять что мы будем делать с трансляцией, мой ноут будет занят во время моего выступления

Я так понимаю, достаточно просто поставить чей-то ноут на запись, например, мой, но у него, вероятно, слабоватая камера

я так и делал, на месте попробуем разобраться, я вот подумываю не купить ли мне нормальную вебку, для этих стримов

моя трансляция не актуальна пока

Очень круто, что выводите только слайды на экран. Намного лучше все видно. Спасибо!
Из зала вопросы не слышны только.

новая трансляция

StarCraft II: A New Challenge for Reinforcement Learning https://arxiv.org/abs/1708.04782

Коллеги, выступившие сегодня, не могли бы вы, пожалуйста, отписаться в расписании

Очень хорошее замечание! Поддерживаю, выступавшие, застолбите за собой местечко на доске почета, пожалуйста!

Готово

https://arxiv.org/abs/1708.05144
TRPO + KFAC, impressive sample efficiency

A Brief Survey of Deep Reinforcement Learning
https://arxiv.org/abs/1708.05866
(действительно brief, всего 14 страниц)

@ipaulo скажите для вновь прибывших, а перезапуск курса будет?

Да, курс с высокой вероятностью состоится, его обсуждение будет в https://t.me/practicalrl.  Этот чат – для координации проведения научного семинара по обучению с подкреплением, где мы разбираем последние интересные научные статьи. Для получения дальнейшей информации – посмотрите в шапку канала и приходите на научный семинар в предстоящий четверг.