ما هي بيانات تدريب الروبوت وكيفية جمعها

ما هي بيانات تدريب الروبوت؟

تتكون بيانات تدريب الروبوت من عروض توضيحية مسجلة للروبوت الذي يؤدي المهام - التقاط أوضاع المفاصل، ووضعيات المؤثر النهائي، وصور الكاميرا، وقراءات القوة/عزم الدوران، ومدخلات تحكم المشغل في تدفقات زمنية متزامنة. تُستخدم هذه البيانات لتدريب سياسات التعلم بالتقليد، وضبط نماذج الرؤية واللغة والعمل (VLA)، وبناء وظائف المكافأة للتعلم المعزز. SVRC خدمات البيانات التعامل مع التجميع الشامل والتعليقات التوضيحية والتصدير لفرق البحث والتجارية.

لماذا تعتبر جودة البيانات أكثر أهمية من الكمية؟

من المفاهيم الخاطئة الشائعة أن المزيد من العروض التوضيحية تنتج دائمًا نماذج أفضل. من الناحية العملية، يعد تنوع البيانات - مواضع الكائنات المتنوعة، وظروف الإضاءة، واستراتيجيات المشغل - أكثر أهمية بكثير من مجرد عدد الحلقات. إن المظاهرات الصاخبة أو غير المتسقة تضر بشكل فعال بأداء السياسات. تفرض بروتوكولات جمع SVRC فحوصات الاتساق، ومعايير إعادة التصوير، ومعايير التغطية للكاميرات المتعددة لضمان تلبية كل حلقة لشريط جودة محدد قبل أن تدخل مجموعة بيانات.

العملية عن بعد مقابل التدريس الحركي مقابل المجموعة النصية

يتم استخدام ثلاث طرق رئيسية لجمع العروض التوضيحية للروبوت. التشغيل عن بعد - باستخدام واجهة التحكم لتشغيل الروبوت في الوقت الفعلي - ينتج البيانات الأكثر طبيعية وقابلة للتعميم. يقوم التدريس الحركي بتوجيه ذراع الروبوت جسديًا من خلال الحركات وتسجيل المسار. تعمل المجموعة النصية على تشغيل أوليات الحركة المحددة مسبقًا لإنشاء بيانات كبيرة الحجم لمهام فرعية محددة جيدًا. تجمع معظم مجموعات بيانات الإنتاج بين الثلاثة اعتمادًا على مدى تعقيد المهمة والتنوع المطلوب.

ما هي الأجهزة التي تحتاجها؟

على الأقل، يتطلب إعداد جمع البيانات ذراعًا آليًا أو منصة متنقلة، وواحدة أو أكثر من كاميرات RGB (مثبتة على المعصم ومثبتة فوق الرأس)، ووحدة تحكم أو قفاز للعمليات عن بعد، ونظام تسجيل يقوم بمزامنة جميع التدفقات. SVRC حزم الأجهزة المستأجرة تضمين إعدادات جمع البيانات التي تم تكوينها مسبقًا لـ OpenArm وMobile ALOHA والأنظمة الأساسية الأخرى، بحيث يمكن للفرق البدء في التجميع في اليوم الأول دون إنشاء بنية تحتية مخصصة.

تنسيقات البيانات والتعليقات التوضيحية والتصدير

عادةً ما يتم تخزين البيانات الأولية التي تم جمعها كملفات HDF5 أو zarr مع تدفقات مراقبة وإجراءات متزامنة. تتم إضافة طبقات التعليقات التوضيحية - تجزئة المهام، وعلامات النجاح، وتسميات تعليمات اللغة - أثناء المعالجة اللاحقة. يتم تصدير SVRC إلى التنسيقات المتوافقة مع مجموعات بيانات LeRobot وLerobot HF وOpen X-Embodiment وخطوط التدريب على السياسة المخصصة. تصفح الموجود مجموعات البيانات العامة لفهم بنية البيانات قبل تصميم مجموعتك الخاصة.

كيفية بدء برنامج جمع البيانات مع SVRC

أسرع طريق هو الاتصال ب خدمات البيانات فريق مع وصف المهمة الخاصة بك، ومنصة الروبوت المستهدفة، وعدد الحلقات المطلوبة. يوفر SVRC لمشغلي التجميع، والأجهزة، وبيئة معملية خاضعة للرقابة في بالو ألتو، وخط الأنابيب الكامل لمرحلة ما بعد المعالجة. يتم أيضًا دعم التجميع عن بعد باستخدام الأجهزة المؤجرة من SVRC في منشأتك للمهام التي تتطلب بيئتك أو كائناتك المحددة.