Multimodale Wahrnehmung und Datenfusion: Die Kernkomponente intelligenter UAVs
Die Wahrnehmung ist zum zentralen Treiber der Drohnenintelligenz geworden, unterstützt durch Durchbrüche in der multimodalen Sensorik und Datenfusion. Systeme mit Einzelsensoren stoßen in komplexen dynamischen Umgebungen an ihre Grenzen, was die Vision-LiDAR-Fusion zu einem wichtigen Fortschritt macht.
Baya et al. kombinierten CNNs mit LiDAR-Daten, um die Erkennung und Verfolgung dynamischer Hindernisse erheblich zu verbessern und die Flugsicherheit in hochdynamischen Szenarien zu erhöhen (Abb. 3(a)). Ullah et al. verfeinerten die Vision-LiDAR-Fusionsstrategie weiter und erweiterten ihren Fokus von der Erkennung dynamischer Hindernisse auf die Anpassung an verschiedene Umgebungen, wodurch die Unterstützung für vielfältige komplexe Missionen erweitert wurde.
Wenn die Wahrnehmung Drohnen "klar sehen" lässt, sorgt die Datenfusion dafür, dass sie "präzise sehen". Xu et al. entwickelten ein multimodales neuronales Fusionsnetzwerk, das Umweltmodelle in Echtzeit aktualisiert und die Pfadplanung optimiert, mit starker Anpassungsfähigkeit in rauem Gelände. Jiang et al. ergänzten diese Arbeit mit einem multiskalaren Infrarot-Vision-Fusionsalgorithmus für Bedingungen mit geringer Sichtbarkeit. Zusammen stärken diese Fortschritte die Echtzeitwahrnehmung, die Umweltmodellierung und die Missionszuverlässigkeit für autonome Drohnen.
