VK
спасибо за таблицу, кстати, она очень полезная
Size: a a a
2019 July 23
SK
reinforce (https://ray.readthedocs.io/en/latest/rllib-algorithms.html#policy-gradients), кстати, у них тоже реализован — там если в код полезть может показаться, что апдейт всё-равно похож на a2c, но по-факту нет, т.к у них реализован подсчёт advantage только через GAE (https://github.com/ray-project/ray/blob/master/python/ray/rllib/evaluation/postprocessing.py#L61), а в reinforce они его не используют (https://github.com/ray-project/ray/blob/master/python/ray/rllib/agents/pg/pg_policy.py#L28)
фух, а то был сильно удивлен, что reinforce нет
но и pg сойдет
но и pg сойдет
A
Ребят. В продакте пока RL нет же ? Где нибудь вообще широко используется ? Можно ли где-то прогнозы на область прочитать?
GS
Ребят. В продакте пока RL нет же ? Где нибудь вообще широко используется ? Можно ли где-то прогнозы на область прочитать?
Бандиты вон направо и налево даже в гугланалитике
SK
Ребят. В продакте пока RL нет же ? Где нибудь вообще широко используется ? Можно ли где-то прогнозы на область прочитать?
переводы, комбинаторные оптимизации, поиски путей в графе, немного self-driving, кто-то заводил под HFT
EZ
переводы, комбинаторные оптимизации, поиски путей в графе, немного self-driving, кто-то заводил под HFT
Очень тяжело проверить в хфт🙈
A
Я так понимаю как основа ИИ для игр не годится ?
A
Кто может сказать в двух словах в чем проблема RL ? Вычислительной мощи не хватает ?
VK
Я так понимаю как основа ИИ для игр не годится ?
для геймдева, кажется, что пока достаточно нерелевантно
A
Или сложность проектирования среды
SK
для геймдева, кажется, что пока достаточно нерелевантно
why so? unity agents потихонку развиваются
если не хотеть ААА, то что-то ламповое, маленькое и с RL придумать можно
если не хотеть ААА, то что-то ламповое, маленькое и с RL придумать можно
SA
why so? unity agents потихонку развиваются
если не хотеть ААА, то что-то ламповое, маленькое и с RL придумать можно
если не хотеть ААА, то что-то ламповое, маленькое и с RL придумать можно
придумать != используется и приносит деньги
VK
why so? unity agents потихонку развиваются
если не хотеть ААА, то что-то ламповое, маленькое и с RL придумать можно
если не хотеть ААА, то что-то ламповое, маленькое и с RL придумать можно
а толку почти никакого, только если рл для рл
VK
всё остальное решается обычными фсмами/фуззи логикой/деревьями
SK
комон, не в деньгах счастье, тут сам концепт интересен
SA
комон, не в деньгах счастье, тут сам концепт интересен
ладно, даже если не в деньгах - в применимости
VK
придёт к тебе геймдизайнер и скажет: ну ваще не весело, вот примерно так будет веселее
VK
и что делать
A
Я так понимаю компьютерное зрение и RL это вообще что-то нереальное?
SA
Я так понимаю компьютерное зрение и RL это вообще что-то нереальное?
ну да, CV нигде не применяется - ни в медицине, ни в сателитах, ни в ритейле, стартапов по камерам тоже нуль