A computer-implemented methods and systems for synthesizing an image includes capturing (802) data from a scene and fusing (804) grid-based representations of the scene from a plurality of different encodings to inherit beneficial properties of the plurality of different encodings, the plurality of different encodings including a Lidar encoding and a high definition map encoding. Rays are rendered (812) from fused grid-based representations. A density is determined (814) for points in the rays, and a color is determined (816) for the points in the rays. The rays are volume rendered (814) with the density and color, and an image is synthesized (820)from volume rendered rays with the density and the color.

    L'invention concerne des systèmes et des procédés mis en œuvre par ordinateur pour synthétiser une image comprenant la capture (802) de données à partir d'une scène et la fusion (804) de représentations basées sur une grille de la scène à partir d'une pluralité de codages différents pour hériter des propriétés bénéfiques de la pluralité de codages différents, la pluralité de codages différents comprenant un codage Lidar et un codage de carte haute définition. Des rayons sont rendus (812) à partir de représentations basées sur une grille fusionnées. Une densité est déterminée (814) pour des points dans les rayons, et une couleur est déterminée (816) pour les points dans les rayons. Les rayons sont rendus en volume (814) avec la densité et la couleur, et une image est synthétisée (820) à partir de rayons rendus en volume avec la densité et la couleur.


    Access

    Download


    Export, share and cite



    Title :

    VIEW SYNTHESIS FOR SELF-DRIVING


    Additional title:

    SYNTHÈSE DE VUE POUR CONDUITE AUTONOME


    Contributors:
    ZHUANG BINGBING (author) / JIANG ZIYU (author) / LIU BUYU (author) / CHANDRAKER MANMOHAN (author) / SUN SHANLIN (author)

    Publication date :

    2025-04-10


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    English


    Classification :

    IPC:    G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / G01S RADIO DIRECTION-FINDING , Funkpeilung



    SENSOR FIELD OF VIEW IN A SELF-DRIVING VEHICLE

    ZOU MING / MORTON PETER / LAUTERBACH CHRISTIAN | European Patent Office | 2023

    Free access

    SENSOR FIELD OF VIEW IN A SELF-DRIVING VEHICLE

    ZOU MING / MORTON PETER / LAUTERBACH CHRISTIAN | European Patent Office | 2021

    Free access

    Driving with Camera View

    Padmos, P. / Van Erp, J. / Applied Vision Association et al. | British Library Conference Proceedings | 1996


    MIRRORS TO EXTEND SENSOR FIELD OF VIEW IN SELF-DRIVING VEHICLES

    CHEN MINGCHENG / PITZER BENJAMIN / DROZ PIERRE-YVES et al. | European Patent Office | 2020

    Free access

    Mirrors to extend sensor field of view in self-driving vehicles

    CHEN MINGCHENG / PITZER BENJAMIN / DROZ PIERRE-YVES et al. | European Patent Office | 2023

    Free access