A perception system may be used to generate bounding boxes for objects in a vehicle scene. The perception system may receive images and feature maps corresponding to the received images. The perception system may link bounding boxes to bounding boxes from a previous time steps and identify false positive bounding boxes. The system can link 3D boxes of the same object from the different frames, by taking the 3D boxes in a time step as input. The system can sue transformer self-attention to exchange information between 3D boxes to learn global-informative box embeddings. Similarity between these learned embeddings can be used to link the boxes of the same object.
L'invention concerne un système de perception qui peut être utilisé pour générer des cadres de délimitation pour des objets dans une scène de véhicule. Le système de perception peut recevoir des images et des cartes de caractéristiques correspondant aux images reçues. Le système de perception peut relier des cadres de délimitation à des cadres de délimitation à partir de précédentes étapes temporelles et identifier des cadres de délimitation faux positifs. Le système peut relier des cadres 3D du même objet à partir des différentes trames, en prenant les cadres 3D dans une étape temporelle comme entrée. Le système peut effectuer une auto-attention de transformateur pour échanger des informations entre des cadres 3D pour apprendre des intégrations de cadre d'informations globales. Une similarité entre ces incorporations apprises peut être utilisée pour relier les cadres du même objet.
END-TO-END TRANSFORMER-BASED BOUNDING BOX TRACKING
SUIVI DE CADRE DE DÉLIMITATION BASÉ SUR UN TRANSFORMATEUR DE BOUT EN BOUT
2024-09-12
Patent
Electronic Resource
English
IPC: | G06V / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL |
Methods and systems for object tracking using bounding boxes
European Patent Office | 2019
|Bounding Multiple Gaussians Uncertainty with Application to Object Tracking
British Library Online Contents | 2016
|Bearing-only target tracking based on ellipsoidal outer-bounding set-membership estimation
British Library Online Contents | 2017
|