A system detects multiple instances of an object in a digital image by receiving a two-dimensional (2D) image that includes a plurality of instances of an object in an environment. For example, the system may receive the 2D image from a camera or other sensing modality of an autonomous vehicle (AV). The system uses a first object detection network to generate a plurality of predicted object instances in the image. The system then receives a data set that comprises depth information corresponding to the plurality of instances of the object in the environment. The data set may be received, for example, from a stereo camera of an AV, and the depth information may be in the form of a disparity map. The system may use the depth information to identify an individual instance from the plurality of predicted object instances in the image.
Un système détecte de multiples instances d'un objet dans une image numérique par la réception d'une image bidimensionnelle (2D) qui comprend une pluralité d'instances d'un objet dans un environnement. Par exemple, le système peut recevoir l'image 2D d'une caméra ou d'une autre modalité de détection d'un véhicule autonome (AV). Le système utilise un premier réseau de détection d'objet pour générer une pluralité d'instances d'objet prédites dans l'image. Le système reçoit ensuite un ensemble de données qui comprend des informations de profondeur correspondant à la pluralité d'instances de l'objet dans l'environnement. L'ensemble de données peut être reçu, par exemple, d'une caméra stéréoscopique d'un AV, et les informations de profondeur peuvent se présenter sous la forme d'une carte de disparité. Le système peut utiliser les informations de profondeur pour identifier une instance individuelle parmi la pluralité d'instances d'objet prédites dans l'image.
GEOMETRY-AWARE INSTANCE SEGMENTATION IN STEREO IMAGE CAPTURE PROCESSES
SEGMENTATION D'INSTANCE SENSIBLE À LA GÉOMÉTRIE DANS DES PROCESSUS DE CAPTURE D'IMAGE STÉRÉOSCOPIQUE
2021-05-20
Patent
Electronic Resource
English
IPC: | G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / G06V / H04N PICTORIAL COMMUNICATION, e.g. TELEVISION , Bildübertragung, z.B. Fernsehen |
Geometry-aware instance segmentation in stereo image capture processes
European Patent Office | 2023
|Geometry-aware instance segmentation in stereo image capture processes
European Patent Office | 2021
|GEOMETRY-AWARE INSTANCE SEGMENTATION IN STEREO IMAGE CAPTURE PROCESSES
European Patent Office | 2021
|GEOMETRY-AWARE INSTANCE SEGMENTATION IN STEREO IMAGE CAPTURE PROCESSES
European Patent Office | 2023
|GEOMETRY-AWARE INSTANCE SEGMENTATION IN STEREO IMAGE CAPTURE PROCESSES
European Patent Office | 2021
|