Embodiments of the present disclosure are directed to providing an Augmented Reality (AR) navigation display in a vehicle. More specifically, embodiments are directed to rendering AR indications of a navigation route over a camera video stream in perspective. According to one embodiment, visual tracking can be performed on features in the video data and camera pose, i.e., a matrix encapsulating position and orientation, can be determined for each frame of video based on both the visual tracking and navigation sensor data. These separately determined camera poses can then be merged or fused into a single camera pose that is more accurate and more stable and which can then be used in rendering more realistic AR route indicators onto the video of the real-world route captured by the camera.

    La présente invention concerne, selon des modes de réalisation, la mise en œuvre d'un affichage de navigation à réalité augmentée (RA) dans un véhicule. De manière plus spécifique, des modes de réalisation concernent le rendu d'indications RA d'un itinéraire de navigation sur un flux vidéo de caméra en perspective. Selon un mode de réalisation, un suivi visuel peut être effectué sur des caractéristiques dans les données vidéo et la pose de caméra, c'est-à-dire, une position et une orientation d'encapsulation de matrice, peuvent être déterminées pour chaque trame de vidéo sur la base à la fois des données de suivi visuel et de capteur de navigation. Ces poses de caméra déterminées séparément peuvent ensuite être combinées ou fusionnées en une seule pose de caméra qui est plus précise et plus stable et qui peut ensuite être utilisée dans le rendu d'indicateurs d'itinéraire RA plus réalistes sur la vidéo de l'itinéraire du monde réel capturé par la caméra.


    Access

    Download


    Export, share and cite



    Title :

    SENSOR FUSION METHODS FOR AUGMENTED REALITY NAVIGATION


    Additional title:

    PROCÉDÉS DE FUSION DE CAPTEURS POUR NAVIGATION À RÉALITÉ AUGMENTÉE


    Contributors:
    ELANGOVAN VIDYA (author) / JAIN PRASHANT (author) / LIANG ANTHONY (author) / WANG GUAN (author)

    Publication date :

    2019-10-03


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    English


    Classification :

    IPC:    G01C Messen von Entfernungen, Höhen, Neigungen oder Richtungen , MEASURING DISTANCES, LEVELS OR BEARINGS / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS / G09G Anordnungen oder Schaltungen zur Steuerung oder Regelung von Anzeigevorrichtungen mit statischen Mitteln zur Darstellung veränderlicher Informationen , ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION



    AUGMENTED REALITY ENHANCED NAVIGATION

    WIND III ANTHONY G / ALBRECHT ROBERT R / HINRICHS TIMOTHY J et al. | European Patent Office | 2018

    Free access

    AUGMENTED REALITY ENHANCED NAVIGATION

    WIND III ANTHONY G / ALBRECHT ROBERT R / HINRICHS TIMOTHY J et al. | European Patent Office | 2018

    Free access

    MODEL BASED AUGMENTED REALITY NAVIGATION

    RUNYAN ARTHUR J / HICKS RICHMOND / ANSARI NAUSHEEN et al. | European Patent Office | 2025

    Free access

    Fusion of VSLAM/GNSS/INS for Augmented Reality Navigation in Ports

    Nakamura, Hiraku / Sonobe, Tatsuya / Toda, Hiroyuki et al. | British Library Conference Proceedings | 2018


    Augmented reality ship auxiliary navigation system

    ZOU DI / TAN CHAO / QIAN YINGQI et al. | European Patent Office | 2024

    Free access