كيف توجه رؤية الحاسوب المركبات الموجهة الآلية والرافعات الشوكية ذاتية القيادة

تساعد الرؤية الحاسوبية الروبوتات المتنقلة المستقلة، والمركبات الموجهة آلياً، والرافعات الشوكية المستقلة على إدراك الأشخاص، والمنصات، والأرفف، والأحمال، واللوحات، ومناطق الأرضيات، والمركبات الأخرى. يمكن لـ Ultralytics YOLO توفير ملاحظات الكشف، والتقسيم، والوضع، والتتبع ضمن حزمة الإدراك تلك. وهي لا تحل محل التحديد، أو تخطيط المسار، أو التحكم في المركبة، أو نظام السلامة المصادق عليه.

الهندسة المعمارية الأفضل عادةً هي دمج المستشعرات. تسهم الكاميرات في الفهم الدلالي ومعلومات المظهر الغنية. وتسهم مستشعرات الليدار والعمق في الهندسة المعمارية والمدى. وتسهم أجهزة التشفير والمستشعرات بالقصور الذاتي في الحركة. يدمج نظام التنقل هذه المدخلات وفقاً للمركبة والبيئة وتقييم المخاطر.

متطلبات الروبوتات المتنقلة المستقلة والمركبات الموجهة آلياً والرافعات الشوكية المستقلة تختلف#

تتبع المركبة الموجهة آلياً غالباً مسارات ثابتة أو شبه ثابتة وتعتمد على البنية التحتية مثل العلامات أو العواكس أو المسارات المحددة على الخريطة. تخطط الروبوتات المتنقلة المستقلة عموماً حول العقبات المتغيرة في بيئة مسجلة على خريطة. وتضيف الرافعة الشوكية المستقلة معالجة الأحمال، وهندسة الصواري والشوكات، والأحمال المرتفعة، والتفاعلات حول المنصات والأرفف.

لا تستخدم التسميات كبديل للمتطلبات. حدد:

• مناطق التشغيل والمسارات المسموح بها.
• سرعة المركبة، وسلوك التوقف، ونطاق الحمولة.
• الأشخاص، والمركبات، وفئات الكائنات التي يجب إدراكها.
• الإضاءة الداخلية والخارجية، والطقس، والغبار، وفئات ظروف الأرضية.
• التحديد المطلوب وسلوك الخريطة.
• النقاط العمياء التي تنشئها المركبة والحمولة.
• توفر الشبكة وحدود الحوسبة على متن المركبة.
• متطلبات الآلات والمركبات وسلامة مكان العمل المعمول بها.

ما تقدمه الرؤية الحاسوبية#

يجب أن تستهلك تطبيقات التنقل ملاحظات صريحة ومؤرخة بزمني. وهي تحتاج إلى معرفة إطار الكاميرا، وإصدار النموذج، والثقة، وعمر كل نتيجة حتى تتمكن من رفض البيانات القديمة أو غير المتسقة.

الكاميرات، والليدار، والعمق متكاملة#

تقدم الكاميرات الأحادية اللون والنسيج بتعقيد أجهزة نسبي منخفض ولكنها لا تقيس العمق المتري بشكل مباشر. تقدّر الكاميرات المجسمة والعمق النشط المدى ضمن نطاق تشغيلها. يوفر الليدار قياسات هندسية مباشرة ويمكن أن يظل مفيداً حيث يختلف المظهر، على الرغم من أن المواد والطقس والهندسة لا تزال مهمة.

يجب أن يتبع اختيار المستشعر تحليل الأعطال. اسأل عن المخاطر أو ميزات التنقل التي قد يتم تفويتها إذا تم حظر مستشعر واحد، أو تشبعه، أو تلوّثه، أو كان غير متوفر. التكرار يساعد فقط عندما تكون أوضاع الفشل مستقلة بما فيه الكفاية ويتعامل منطق الدمج مع الاختلاف.

يجب أن يأخذ وضع الكاميرا في الاعتبار الانعطاف، والرجوع للخلف، وموضع الشوكة، والأحمال المتغيرة. تحقق من مجال الرؤية مع أكبر حمولة مسموح بها وكل حالة صاري. أضف فحوصات التنظيف، والفحص، والمحاذاة إلى إجراءات الصيانة.

قم بنشر مجموعة بيانات الإدراك من المسارات، وليس الصور المعزولة#

اجمع شروط المسار الكاملة عبر المواقع، والنوبات، وأنواع الممرات، والتقاطعات، ومناطق الأرصفة، وحركة الأشخاص والمركبات، وحالات الحمولة، وظروف الصيانة. قم بتضمين السلبيات الصعبة مثل الملصقات، والانعكاسات، والدمى، والمواد المكدسة، والآراء الجزئية التي تشبه فئات الهدف.

قسّم بيانات التقييم حسب المسار، أو الوقت، أو الموقع لتجنب إطارات الفيديو القريبة من التكرار في التدريب والاختبار. أبلغ عن الأداء حسب المسافة، والانسداد، والإضاءة، والحركة، ونوع الكائن. يمكن لمتوسط واحد إخفاء الحالات الأكثر أهمية بالقرب من التقاطعات أو مناطق الإرساء.

يمكن لـ Ultralytics Platform دعم التعليق التوضيحي، والتدريب، وإدارة الإصدارات لننماذج إدراك Ultralytics YOLO المخصصة. يمكن للنماذج المصدرة التشغيل على منصات التشغيل على متن المركبة أو الحافة المدعومة المحددة لقيود الحوسبة والتأخير للمركبة.

دمج الإدراك مع ROS 2 أو حزمة روبوتات أخرى#

غالباً ما ينشر تكامل الروبوتات عمليات الكشف أو الأقنعة مع الطوابع الزمنية ومعلومات إطار الإحداثيات. يربط طبقة التحويل إحداثيات الكاميرا بالمركبة. تستخدم طبقة التنقل أو السلوك الملاحظات إلى جانب الخرائط، ومستشعرات المدى، وقياس المسافة، وحالة المهمة.

التصميم من أجل:

• مزامنة الوقت بين المستشعرات.
• التأخير المحدد ورفض الرسائل القديمة.
• حالات صحة الكاميرا وصحة النموذج.
• السلوك الصريح عندما تختلف المستشعرات.
• البيانات المسجلة الكافية لإعادة إنتاج حدث.
• مخططات الرسائل ذات الإصدارات ومخرجات النماذج.
• تنافس الموارد بين الإدراك والتحديد والتخطيط.

تجنب ربط التنقل مباشرة بمخرجات نموذج غير موثقة. تتيح الواجهة المستقرة للإدراك التطور دون تغيير سلوك المركبة بصمت.

حدود السلامة#

يمكن للرؤية الحاسوبية للأغراض العامة دعم الوعي والقرارات التشغيلية، ولكن لا ينبغي وصفها بأنها جهاز حماية معتمد. تنتمي توقفات المركبات، والحقول الواقية، ووظائف الطوارئ، والتحقق من صحة السلامة إلى هندسة السلامة المعمول بها وعملية الهندسة المختصة.

وثّق ما يحدث عندما يفشل النموذج، أو الكاميرا، أو الحوسبة، أو الشبكة. قد تتطلب الحالة الآمنة سرعة مخفضة، أو توقفاً منظماً، أو تقييد المسار، أو الانتقال إلى وضع تشغيل آخر، اعتماداً على تصميم النظام. تحقق من هذه السلوكيات على المركبة الكاملة.

خطة التقييم#

اختبر الإدراك والتنقل والعمليات بشكل منفصل ومعاً.

اختبارات الإدراك#

• الكشف والتحديد حسب المسافة، والاتجاه، والإضاءة، والانسداد.
• استمرارية التتبع عبر التقاطعات والعوائق المؤقتة.
• الإيجابيات الكاذبة من كائنات الخلفية والانعكاسات.
• الأداء مع كاميرات متسخة، أو مُزاحة، أو ضبابية، أو محجوبة جزئياً.
• التأخير الشامل واستخدام الموارد على الحوسبة المستهدفة.

اختبارات التنقل#

• التقاطعات، والممرات الضيقة، والدمج، والتجاوز، والرجوع للخلف، والإرساء.
• العوائق الثابتة والمتحركة بالسرعات التمثيلية.
• تغيرات الخريطة، والحواجز المؤقتة، وإغلاق المسارات.
• اختلاف المستشعرات، وتأخير الرسائل، والمدخلات المفقودة.
• التعافي من فقدان التحديد أو مكون إدراك غير متوفر.

الاختبارات التشغيلية#

• التقاط الحمولة، والنقل، والوضع عبر متغيرات المنصات.
• السلوك مع أحمال مرتفعة أو محجوبة للرؤية.
• تغييرات النوبات، والشحن، وبدء التشغيل، والإيقاف، والصيانة.
• إعادة بناء الحوادث وإرجاع النموذج.

قسّم إكمال المهام، والتدخلات، وتأخيرات المسارات، ووقت عدم التوفر، وأخطاء الإدراك، وسلوك الاسترداد. لا تستنتج سلامة التنقل من دقة النموذج وحدها.

خيارات نشر العمليات#

الاستدلال على متن المركبة يقلل الاعتماد على اتصال الشبكة ويمكنه الاحتفاظ ببيانات مستشعرات عالية المعدل على المركبة. وهو يتطلب تحديثات برمجية مسيطراً عليها، ومراقبة الموارد، وإدارة التخزين، ودعم الأجهزة عبر الأسطول.

يمكن للخدمات المركزية تبسيط إدارة النماذج وتجميع بيانات المراجعة، ولكن يجب أن يأخذ سلوك المركبة في الوقت الفعلي في الاعتبار تأخير الشبكة وفقدانها. يمكن لتصميم هجيني تشغيل الإدراك الفوري على متن المركبة مع إدارة مركزية لعناصر النموذج المعتمدة، والبيانات التعريفية، وأمثلة المراجعة المختارة.

استخدم الإصدارات التدريجية. ابدأ بإعادة التشغيل المسجلة، ثم منطقة اختبار، وملاحظات الظل، والعمليات المقيدة، ومجموعة فرعية خاضعة للتحكم من الأسطول قبل النشر الواسع. حافظ على نموذج وتكوين معروفين بصلاحيتهما للإرجاع.