온라인 미세조정
진행 중인 로봇 배포로부터의 데이터를 사용하여 사전 훈련된 정책을 실시간으로 업데이트함. 온라인 미세조정은 로봇이 새로운 시나리오를 만날 때 지속적인 개선을 가능하게 함. 과제로는 재앙적 망각(catastrophic forgetting), 미세조정 중 안전한 탐색, 배포 하드웨어에서의 효율적인 그래디언트 업데이트 계산이 있음.
진행 중인 로봇 배포로부터의 데이터를 사용하여 사전 훈련된 정책을 실시간으로 업데이트함. 온라인 미세조정은 로봇이 새로운 시나리오를 만날 때 지속적인 개선을 가능하게 함. 과제로는 재앙적 망각(catastrophic forgetting), 미세조정 중 안전한 탐색, 배포 하드웨어에서의 효율적인 그래디언트 업데이트 계산이 있음.