Embodiments of the present disclosure are directed to providing an Augmented Reality (AR) navigation display in a vehicle. More specifically, embodiments are directed to rendering AR indications of a navigation route over a camera video stream in perspective. According to one embodiment, visual tracking can be performed on features in the video data and camera pose, i.e., a matrix encapsulating position and orientation, can be determined for each frame of video based on both the visual tracking and navigation sensor data. These separately determined camera poses can then be merged or fused into a single camera pose that is more accurate and more stable and which can then be used in rendering more realistic AR route indicators onto the video of the real-world route captured by the camera.
La présente invention concerne, selon des modes de réalisation, la mise en œuvre d'un affichage de navigation à réalité augmentée (RA) dans un véhicule. De manière plus spécifique, des modes de réalisation concernent le rendu d'indications RA d'un itinéraire de navigation sur un flux vidéo de caméra en perspective. Selon un mode de réalisation, un suivi visuel peut être effectué sur des caractéristiques dans les données vidéo et la pose de caméra, c'est-à-dire, une position et une orientation d'encapsulation de matrice, peuvent être déterminées pour chaque trame de vidéo sur la base à la fois des données de suivi visuel et de capteur de navigation. Ces poses de caméra déterminées séparément peuvent ensuite être combinées ou fusionnées en une seule pose de caméra qui est plus précise et plus stable et qui peut ensuite être utilisée dans le rendu d'indicateurs d'itinéraire RA plus réalistes sur la vidéo de l'itinéraire du monde réel capturé par la caméra.
SENSOR FUSION METHODS FOR AUGMENTED REALITY NAVIGATION
PROCÉDÉS DE FUSION DE CAPTEURS POUR NAVIGATION À RÉALITÉ AUGMENTÉE
2019-10-03
Patent
Electronic Resource
English
IPC: | G01C Messen von Entfernungen, Höhen, Neigungen oder Richtungen , MEASURING DISTANCES, LEVELS OR BEARINGS / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS / G09G Anordnungen oder Schaltungen zur Steuerung oder Regelung von Anzeigevorrichtungen mit statischen Mitteln zur Darstellung veränderlicher Informationen , ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION |
Fusion of VSLAM/GNSS/INS for Augmented Reality Navigation in Ports
British Library Conference Proceedings | 2018
|