Voltar para Glossary
Destilação de Conhecimento
Treinar um modelo estudante menor para corresponder às saídas (logits suaves) de um modelo professor maior. O estudante aprende uma versão comprimida do conhecimento do professor. Em robótica, a destilação é usada para: comprimir grandes modelos VLA para inferência em tempo real, transferir professores com informações privilegiadas para estudantes apenas com visão, e criar modelos de percepção eficientes implantáveis em borda.