A computer-implemented methods and systems for synthesizing an image includes capturing (802) data from a scene and fusing (804) grid-based representations of the scene from a plurality of different encodings to inherit beneficial properties of the plurality of different encodings, the plurality of different encodings including a Lidar encoding and a high definition map encoding. Rays are rendered (812) from fused grid-based representations. A density is determined (814) for points in the rays, and a color is determined (816) for the points in the rays. The rays are volume rendered (814) with the density and color, and an image is synthesized (820)from volume rendered rays with the density and the color.
L'invention concerne des systèmes et des procédés mis en œuvre par ordinateur pour synthétiser une image comprenant la capture (802) de données à partir d'une scène et la fusion (804) de représentations basées sur une grille de la scène à partir d'une pluralité de codages différents pour hériter des propriétés bénéfiques de la pluralité de codages différents, la pluralité de codages différents comprenant un codage Lidar et un codage de carte haute définition. Des rayons sont rendus (812) à partir de représentations basées sur une grille fusionnées. Une densité est déterminée (814) pour des points dans les rayons, et une couleur est déterminée (816) pour les points dans les rayons. Les rayons sont rendus en volume (814) avec la densité et la couleur, et une image est synthétisée (820) à partir de rayons rendus en volume avec la densité et la couleur.
VIEW SYNTHESIS FOR SELF-DRIVING
SYNTHÈSE DE VUE POUR CONDUITE AUTONOME
2025-04-10
Patent
Electronic Resource
English
IPC: | G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / G01S RADIO DIRECTION-FINDING , Funkpeilung |
British Library Conference Proceedings | 1996
|MIRRORS TO EXTEND SENSOR FIELD OF VIEW IN SELF-DRIVING VEHICLES
European Patent Office | 2020
|Mirrors to extend sensor field of view in self-driving vehicles
European Patent Office | 2023
|