Vehicle computing systems may receive and fuse long-wave infrared data with radar data to detect and track objects in low-visibility driving environments. In some examples, radar data including position and velocity data may be projected over infrared image data to detect, classify, and track infrared-emitting objects. Machine-learned transformer models with attention also may be trained to output object detections based on combined infrared and radar data. The fusion of infrared and radar data may be used individual and/or may be synchronized with other sensor modalities. In some examples, the fusion and analysis of infrared and radar data may be used in specific low-visibility driving environments, using low-light, fog, and shadowed areas of the environment, to detect and track infrared-emitting and/or moving objects such as pedestrians and animals that may be obscured from detection by other sensor modalities.
Des systèmes informatiques de véhicule peuvent recevoir et fusionner des données infrarouges à ondes longues avec des données radar pour détecter et suivre des objets dans des environnements de conduite à faible visibilité. Dans certains exemples, des données radar comprenant des données de position et de vitesse peuvent être projetées sur des données d'image infrarouges pour détecter, classer et suivre des objets à émission infrarouge. Des modèles de transformateur appris par machine avec attention peuvent également être entraînés pour générer des détections d'objets sur la base de données infrarouges et radar combinées. La fusion de données infrarouges et radar peut être utilisée individuellement et/ou peut être synchronisée avec d'autres modalités de capteur. Dans certains exemples, la fusion et l'analyse de données infrarouges et radar peuvent être utilisées dans des environnements de conduite à faible visibilité spécifiques, à l'aide de zones à faible lumière, de brouillard et ombrées de l'environnement, pour détecter et suivre des objets à émission infrarouge et/ou en mouvement tels que des piétons et des animaux qui peuvent être masqués de la détection par d'autres modalités de capteur.
FUSION OF RADAR AND INFRARED DATA FOR OBJECT DETECTION AND TRACKING
FUSION DE DONNÉES RADAR ET INFRAROUGES À DES FINS DE DÉTECTION ET DE SUIVI D'OBJETS
2025-03-06
Patent
Electronic Resource
English
FUSION OF RADAR AND INFRARED DATA FOR OBJECT DETECTION AND TRACKING
European Patent Office | 2025
|Data fusion of infrared and radar for target tracking
IEEE | 2008
|15.10 Multi-Target Multi-Object Tracking, Sensor Fusion of Radar and Infrared
British Library Conference Proceedings | 2004
|3D Multi-Object Tracking Based on Radar-Camera Fusion
IEEE | 2022
|