マルチモーダル ロボット データセット

マルチモーダル データセットは視覚、行動、固有受容、触覚を結び付けるため、チームはポリシーに実際にどのような情報が必要かを推論できます。

比較する信号
  • RGBと深度依然として知覚主導の操作タスクのベースラインです。
  • 力と触覚接触が多いトランジションとグリップの安定性にとって重要です。
  • 言語とメタデータ検索、スライスの評価、および命令のグラウンディングに役立ちます。
実践的なポイント

このページは、チームが再トレーニングの前に、より多くのモダリティ、より適切なタイミング調整、またはより明確なメタデータが必要かどうかを判断するのに役立ちます。

マルチモーダルなデータ収集が必要ですか?

トレーニング スタックのセンサー、同期、配信形式を調査できます。