Bimanuale Robotern Manipulation: technische Erhebung und Anwendung 2025
Umfrage über die zweimanuelle Roboternupulation <unk> Hardwareplattformen, Lernalgorithmen, Herausforderungen bei der Datenerhebung und industrielle Anwendungen.
[← Forschung]
Die Bimanuale Manipulation löst die Aufgabenbereitschaft von Einarmsystemen
Warum Bimanuale wichtig sind
Die meisten hochwertigen Manipulationsarbeiten in der realen Welt erfordern zwei Hände: das Falten von Wäschen, die Montage von Produkten, die Zubereitung von Lebensmitteln, chirurgische Verfahren, Verpackungen mit präziser Platzierung. Einarmbroot-Roboter können die Teilmenge dieser Aufgaben automatisieren, die keine Stabilisierung, Neuausrichtung oder Übergabe erfordern
Das Stanford ALOHA-Projekt, das einen zweibäuchlichen Roboter demonstrierte, der Aufgaben wie das Schließen von Batterien, die Verwendung einer Spatula und die Entfernung von Markierungen erlernt, wurde zum Referenzpunkt für die Forschungsgemeinschaft, weil es gezeigt hat, dass das Imitationslernen auf zweibäuchlichen Systemen sowohl realisierbar als auch überraschende Geschicklichkeit mit erreichbaren Datenvolumen (50
Hardware-Plattformen
ALOHA und ALOHA 2 (Stanford)
ALOHA (A Low-Cost Open-Source Hardware System for Bimanual Teleoperation) verwendet zwei ViperX 300 Arme als Folgerroboter und zwei WidowX 250 Arme als Führer (Teleoperation) Arme.
- ALOHA 2 verbessert die Drehmoment-Motoren, verbessert das Handgelenkdesign und verbessert die Kameraanlage (3 Kameras: Oberkopf + zwei Handgelenkmontiert). Er ermöglicht hochpräzise Aufgaben einschließlich chirurgischer Manipulation.
- Kontrolle: Führer-Follower-Gemeinschaftspositionskontrolle bei 50 Hz. Ethernet-Verbindung mit niedriger Latenz zwischen Führern und Anhängern. ROS-2-basiert.
- Datenformat: HDF5 mit synchronisierten Gelenksetzungen, Geschwindigkeiten, End-Effektor-Positionen und Kamerabildern bei 50 Hz bzw. 30 fps.
ARX5 Doppelarm
Die ARX5 (Agility Robotics Research, jetzt Open-Source) ist eine leichtere, zweibrochige Plattform, die für Forschung zu niedrigeren Kosten (~ 15.000 US-Dollar für ein zweibarmiges System) entwickelt wurde. Höhere Geschwindigkeit als ALOHA, etwas niedrigerer Nutzlast (3 kg pro Arm gegenüber ViperX 750 g Nennwert Nutzlast bei voller Erweiterung).
Universalroboter UR3e Doppelarm
Zwei UR3e-Arme, die auf einem gemeinsamen Arbeitsplatz montiert sind, bieten ein bi-manuelles System der Industrie-Grad mit ausgezeichneter Ökosystemunterstützung (UR+ Plugins, breite Griffwahl). Kosten: 40.000 USD für die Einrichtung mit zwei Armen mit Griff und Sensoren.
Einheitsträu H1 / G1 Bimanuale Humanoid
Die Humanoboter bieten eine mit einer mobilen Basis integrierte, zweimanschließende Manipulation und ermöglichen Aufgaben in unstrukturierten Umgebungen. Die Unitree G1 (16.000 USD) und H1 (90.000 USD) bieten zwei Arme mit 6-DOF-Manipulationsausstattung.
Koordinierungsprobleme
Die Bimanuale Manipulation stellt einzigartige technische Herausforderungen ein, die in Einarmsystemen nicht vorliegen:
- Zeitliche Synchronisierung: Die linken und rechten Arme müssen koordinierte Bewegungen mit präzisen Zeitpunkten ausführen
Zum Beispiel muss ein Arm ein Objekt stabilisieren, während der andere Kraft anwendet, die eine Synchronisierung zwischen den Armsteuerungen von <10 ms erfordert. - Kollisionen im Arbeitsraum zu vermeiden: Die beiden Arme teilen einen Arbeitsraum und können aufeinander kollidieren oder mit dem Objekt, das manipuliert wird.
- Übergabe-Planung: Aufgaben, bei denen die Übertragung von Objekten von der einen Hand zur anderen erforderlich ist, erfordern, dass die empfangende Hand im Moment der Übertragung der Hand genau in der richtigen Position und Orientierung ist.
- ** Redundanzlösung:** Ein zweimanschaltetes System mit 12+ DOF (6 pro Arm) mit einem 6-DOF-Objekt hat 6+ Grad an Redundanz.
Datenerhebung für Bimanuale Systeme
Die Bimanuale Datenerhebung ist ungefähr 2x teurer als die Einarmsammlung, aber die Kostenprämien werden oft unterschätzt:
- Betriebssystem: Bei der Teleoperation zwischen Führer und Nachfolger benötigen zweimanschließende Systeme entweder (a) zwei menschliche Betreiber, die jeweils einen Arm kontrollieren, oder (b) einen einzelnen Betreiber, der ein zweirähmiges Führersystem (ALOHA-Stil) verwendet.
- Synchronisierungsqualität: Bei zweimanualen Demonstrationen müssen die beiden Betreiber (oder beide Arme des Führungssystems) genau koordiniert werden.
- Erfolgsrate: Bimanuale Aufgaben haben in der Regel niedrigere Betriebssuchsrate (50
70%) als gleichwertige Einarmbestellungen (70 85%) weil Koordinierungsfehler additiv sind eine Fehlerrate von 15% pro Armverbindung bis zu 28% Fehlerrate. - Praktisches Budget: Für eine zweimanuelle Aufgabe von L3 (Gebäudeübergabe, Objektsmontage) wird ein Budget von 2.000
5.000 Demonstrationen zur Ausbildung einer zuverlässigen Politik (gegenüber 500 2.000 für ein einarmige Äquivalent) vorgesehen.
Lernalgorithmen für Bimanual
- Unabhängige Armpolitik (wirkt nicht): Die Ausbildung von separaten Politiken für linken und rechten Arme versagt unabhängig von einer anderen Aufgabe, die eine Koordinierung erfordert.
- Gemeinsame Zustand (anforderlich): Die Politik muss den vollen 12+ DOF-Gemeinsamen Zustand beider Arme gleichzeitig beobachten und koordinierte Aktionen für beide ausführen. ACT behandelt dies natürlich
das CVAE kodiert den vollständigen zweibrochigen Demonstrationsstil und der Transformator-Aktionsdekoder ausführt Aktionen für alle Gelenke gemeinsam. - ACT für die zweimanuale (Standardempfehlung): ACT mit H=100 und dem vollständigen zweimanuale Gelenksatz als Eingabe ist der aktuelle Standard für die zweimanuale Manipulationsarbeiten.
- Diffusionspolitik für bi-manual: Die Diffusionspolitik verwaltet auch bi-manual gut aufgrund ihrer multimodalaten Aktionsverteilung.
Leistungsbezogene Benchmarks
| Task | Algorithm | Demos | Success Rate | Notes |
|---|---|---|---|---|
| Cup handover | ACT | 50 | 92% | From ALOHA paper (Zhao et al. 2023) |
| Battery insertion | ACT | 50 | 78% | From ALOHA paper |
| Slot battery + close door | ACT | 50 | 65% | From ALOHA paper, complex timing |
| Cloth folding (T-shirt) | π0 (Physical Intelligence) | Proprietary | ~70% | From π0 technical report 2024 |
| Table busing | π0 | Proprietary | ~65% | Multi-step, variable objects |
RCSV betreibt ALOHA-2 und ARX5-Doppel-Arm-Systeme für die zweibrochige Datenerhebung und die Politikentwicklung.
Bimanuale Datenerhebung am RCSV
RCSV verfügt über ALOHA-2 und ARX5-Doppelarm-Systeme für die zweibrochige Demonstrationsammlung.