التصور المتعدد الوسائط ودمج البيانات: المحرك الأساسي للطائرات بدون طيار الذكية
أصبح الإدراك المحرك الرئيسي لذكاء الطائرات بدون طيار، مدعومًا بالاختراقات في الاستشعار المتعدد الوسائط واندماج البيانات.جعل التفاعل بين الرؤية وLiDAR تقدما رئيسيا.
قام Baya et al. بتجمع CNNs مع بيانات LiDAR لتحسين الكشف الديناميكي عن العقبات وتتبعها بشكل كبير ، مما يعزز سلامة الرحلة في السيناريوهات الديناميكية للغاية (الشكل 3 ((أ)).مزيد من تحسين رؤية استراتيجية اندماج LiDAR، وتوسيع تركيزها من التعرف الديناميكي على العقبات إلى التكيف مع البيئات المتعددة، وتوسيع الدعم لمختلف المهام المعقدة.

إذا كان الإدراك يسمح للطائرات بدون طيار بـ"الرؤية بوضوح"، فإن دمج البيانات يضمن لهم "الرؤية بدقة".طورت إطار عمل لاندماج الشبكات العصبية متعددة الوسائط الذي يحديث النماذج البيئية في الوقت الحقيقي ويحسن تخطيط المسار، مع القدرة القوية على التكيف في التضاريس الخاشعة. قام جيانغ وزملاؤه بتكميل هذا العمل بخوارزمية اندماج الرؤية تحت الحمراء متعددة المقاييس لظروف ضعف الرؤية.هذه التطورات تعزز الإدراك في الوقت الحقيقي، النمذجة البيئية، وموثوقية المهمة للطائرات بدون طيار المستقلة.