Социальное обучение - это обучение путем наблюдения за поведением других агентов в среде. Такой метод обучения используется людьми и животными, и позволяет открывать полезные модели поведения, которые было бы трудно получить только лишь по собственному опыту. Так же наблюдение за другими помогает быстро адаптироваться к новым обстоятельствам.

Что если идею социального обучения использовать для обучения RL-агентов? Во многих реальных средах, где мы бы хотели использовать RL-агентов (автопилоты, роботы), индивидуальное обучение агента дорогостоящее, неэффективное, и может быть очень не безопасным. Однако эти среды заполнены людьми-экспертами, которые знают, как выполнять задачи (вождение автомобиля, загрузка посудомоечной машины). RL-агенты могут пассивно наблюдать за поведением людей и таким образом обучаться.

Авторы статьи Multi-agent Social Reinforcement Learning Improves Generalization исследуют, может ли RL-агент извлечь выгоду из присутствия опытных агентов в среде. На семинаре мы разберем, что такое социальное обучение, и обсудим предложенное решение от автором статьи.

Докладчик: Алина Плешкова.

Слайды: https://drive.google.com/file/d/1jEYVi7mVrwibjYM8eEmhoyzPYFhiOvQR/view?usp=sharing