Назад к Glossary
Манипуляция с открытым словарём
Способность робота манипулировать объектами, указанными описаниями на естественном языке, даже объектами, не встреченными во время обучения. Манипуляция с открытым словарём объединяет VLM (для идентификации объектов из запросов на естественном языке) с политиками манипуляции. Модели, такие как CLIPort, VIMA и RT-2, демонстрируют возможности открытого словаря путём привязки языка к визуальным наблюдениям.