Разреженное вознаграждение
Функция вознаграждения, которая предоставляет сигнал только при завершении задачи (успех/неудача), с нулевым вознаграждением на всех промежуточных шагах. Разреженные вознаграждения — это наиболее естественная спецификация (бинарный успех), но самая сложная для обучения с подкреплением — агент должен обнаружить успешное поведение через случайное исследование. HER, учебная программа обучения и формирование вознаграждения решают проблему обучения с разреженными вознаграждениями.







