Я как обычно наверное сделаю трансляцию на ютуб

трансляця

Вопрос лектору

а с месседж пассинг из belief propagation в вероятностных моделях связь есть? выглядит оч похоже

Мы теперь навсегда переехали в другую аудиторию? На всех её явно не хватает

Это вы еще на байесовских методах в Гарварде не были

Будем смотреть, как пойдет.

Да, ладно. Было вполне уютно. Правда стульев не хватало.

OpenAI подбираются к мультиагентным системам
https://blog.openai.com/learning-to-model-other-minds/

Поправьте, пожалуйста, ссылки на вчерашние презентации, там ссылка просто на гугл диск.

не подскажете, как value function на русский переводить?

Функция полезности?

не совсем, это функция ценности

мне кажется, если говорить про общепринятый термин в русской литературе ,то это всё-таки функция полезности

Кажется не соглашусь.
Функция полезности это utility function из литературы посвященной рациональному выбору в экономических и социологических моделях.

Я бы голосовал за этот термин

В RL тоже есть понятие utility function, кажется. Ребята из BAIR называют utility function функционал J(\theta), который минимизируется в PG methods и по сути является V(s_0).

Граница между понятиями очень зыбкая.
http://andrewgelman.com/2007/10/25/dont_say_utilit/
Я бы сказал, что utility отличается от value тем, что первую можно посчитать, а вторую только оценить.
Ребята из BAIR пришли из мира опт управления, где cost - заданная функция, которую можно посчитать. И если речь идёт про их статью о комбинации model free и model based - то там как раз cost есть заданная функция.
Но это конечно с моей колокольни так видится. Буду рад услышать альтернативное мнение.

When waiting is not an option: learning options with a deliberation cost (https://arxiv.org/abs/1709.04571) – анализирует, что же такое такое макро действия и как их правильно учить это выучивать с нуля.