A peripheral video generating device (1) is provided with: a video input unit (10) for inputting peripheral video data captured using a plurality of cameras (20); a video combining unit (12) for combining the peripheral video data to generate a combined video viewed from a prescribed viewpoint; a three-dimensional shape estimating unit (13) for estimating the three-dimensional shape of an object in the periphery, on the basis of the peripheral video data; a shielded region estimating unit (14) for using the estimated result of the three-dimensional shape to estimate a shielded region of the combined video that cannot be seen from the prescribed viewpoint; an inferring unit (15) for inferring a video of the shielded region using deep learning; and a video superimposing unit (16) for superimposing the video inferred by the inferring unit (15) onto the shielded region of the combined video.

    Un dispositif de génération de vidéo périphérique (1) comprend : une unité d'entrée vidéo (10) pour entrer des données de vidéo périphérique capturées à l'aide d'une pluralité de caméras (20) ; une unité de combinaison de vidéo (12) pour combiner les données de vidéo périphérique pour générer une vidéo combinée vue à partir d'un point de vue prescrit ; une unité d'estimation de forme tridimensionnelle (13) pour estimer la forme tridimensionnelle d'un objet dans la périphérie, sur la base des données de vidéo périphérique ; une unité d'estimation de région protégée (14) pour utiliser le résultat estimé de la forme tridimensionnelle pour estimer une région protégée de la vidéo combinée qui ne peut pas être vue depuis le point de vue prescrit ; une unité de déduction (15) pour déduire une vidéo de la région protégée à l'aide d'un apprentissage profond ; et une unité de superposition de vidéo (16) pour superposer la vidéo déduite par l'unité de déduction (15) sur la région protégée de la vidéo combinée.

    周辺映像生成装置(1)は、複数のカメラ(20)にて撮影した周辺映像データを入力する映像入力部(10)と、周辺映像データを合成して所定の視点から見た合成映像を生成する映像合成部(12)と、周辺映像データに基づいて周辺にある物体の立体形状を推定する立体形状推定部(13)と、立体形状の推定結果を用いて、合成映像において所定の視点から見えない遮蔽領域を推定する遮蔽領域推定部(14)と、深層学習を用いて遮蔽領域の映像を推論する推論部(15)と、推論部(15)にて推論された映像を合成映像の遮蔽領域に重畳する映像重畳部(16)とを備える。


    Access

    Download


    Export, share and cite



    Title :

    PERIPHERAL VIDEO GENERATING DEVICE, PERIPHERAL VIDEO GENERATING METHOD, AND PROGRAM


    Additional title:

    DISPOSITIF DE GÉNÉRATION DE VIDÉO PÉRIPHÉRIQUE, PROCÉDÉ DE GÉNÉRATION DE VIDÉO PÉRIPHÉRIQUE, ET PROGRAMME
    周辺映像生成装置、周辺映像生成方法、およびプログラム


    Contributors:

    Publication date :

    2021-02-18


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Japanese


    Classification :

    IPC:    H04N PICTORIAL COMMUNICATION, e.g. TELEVISION , Bildübertragung, z.B. Fernsehen / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS



    PERIPHERAL VIDEO IMAGE GENERATION DEVICE, PERIPHERAL VIDEO IMAGE GENERATION METHOD, AND PROGRAM

    OGUCHI TAKAHIRO / HATTORI YOSUKE / SEKIKAWA YUSUKE | European Patent Office | 2021

    Free access

    OVERHEAD VIDEO GENERATING DEVICE, OVERHEAD VIDEO GENERATING SYSTEM, OVERHEAD VIDEO GENERATING METHOD AND PROGRAM

    MORI TOSHIO / SATOMI TSUNEO / ASAYAMA MANABU | European Patent Office | 2018

    Free access

    VIDEO GENERATING DEVICE

    NISHIDA TAKEHISA / OKUDE MARIKO | European Patent Office | 2021

    Free access

    Peripheral Video Display Of Automobile

    European Patent Office | 2021

    Free access