Эксперты из лаборатории искусственного интеллекта Uber AI Labs представили разработанное семейство алгоритмов Go-Explore, которые способны справляться с классическими играми 1980-х годов лучше людей.
Инженеры рассказали, что особенностью Go-Explore является способность запоминать предшествующие перспективные состояния и возвращаться в них, осуществляя оттуда дальнейшую разведку, что позволяет повысить эффективность алгоритма обучения с подкреплением. В ходе эксперимента ученые уже доказали возможное применение алгоритмов для робототехники в задаче управления манипулятором робота. Также не исключено, что в будущем алгоритм станет полезным для решения других задач – от обработки естественных языков до создания новых лекарств.
Алгоритмы Go-Explore менее подвержены проблемам редкого вознаграждения и неправильных локальных минимумов.
