Zurück zu Glossary
Aktionsdestillation
Eine Technik, bei der eine komplexe Lehrerrichtlinie (z. B. eine RL-Richtlinie mit privilegiertem Zugriff auf den Zustand) in eine einfachere Schülerrichtlinie (z. B. eine visuomotorische Richtlinie, die nur Kamerabilder verwendet) destilliert wird. Der Schüler wird durch Verhaltensklonen auf den Rollouts des Lehrers trainiert. Dieser zweistufige Ansatz ist häufig bei der Sim-zu-Real-Übertragung: Trainieren Sie einen leistungsstarken Lehrer in der Simulation mit vollständigem Zustand, dann destillieren Sie zu einer einsetzbaren Sichtrichtlinie.