CALVIN

Составление действий на основе языка и видения — долгосрочная, обусловленная языком манипуляция.

Обзор

CALVIN оценивает манипуляцию, обусловленную языком, в долгосрочной перспективе. Агенты должны составить несколько навыков из инструкций на естественном языке. На основе моделирования. RoboFlamingo и другие политики на основе VLM демонстрируют высокую эффективность.

Официальные ссылки

github.com/mees/calvin — Код и набор данных