The present disclosure relates to a signal processing device, signal processing method, program, moving body, and signal processing system for making it possible to enhance detection result accuracy by appropriately synchronizing and combining a stereo camera and millimeter wave radar. In the present invention, during calibration, a sensor unit acquires the times when photographed (acquired) stereo camera images and radar images of a target having a radar reflector and a marker were acquired while the distance between the sensor unit and target is changed and uses the acquired times to determine time deviation amounts that are the differences between the times when a stereo camera image and radar image at the same distance were acquired. During object detection, a radar image acquired first is buffered and output in combination with a stereo camera image acquired after a delay of a time deviation amount, and the stereo camera image and radar image are combined to create a highly accurate detected object distance image. This disclosure can be applied to a vehicle-mounted system.

    La présente invention concerne un dispositif de traitement de signal, un procédé de traitement de signal, un programme, un corps mobile et un système de traitement de signal permettant d'améliorer la précision d'un résultat de détection par la synchronisation et la combinaison appropriées d'une caméra stéréo et d'un radar à ondes millimétriques. Selon la présente invention, pendant l'étalonnage, une unité de capteur acquiert les moments où des images de caméra stéréo et des images radar photographiées (acquises) d'une cible possédant un réflecteur radar et un marqueur ont été acquises pendant que la distance entre l'unité de capteur et la cible est modifiée, et utilise les moments acquis afin de déterminer des quantités d'écart temporel constituant les différences entre les moments où une image de caméra stéréo et une image radar à la même distance ont été acquises. Pendant la détection d'objet, une image radar acquise en premier est mise en tampon et émise en combinaison avec une image de caméra stéréo acquise après un retard d'une quantité d'écart temporel, et l'image de caméra stéréo et l'image radar sont combinées afin de créer une image de distance d'objet détectée très précise. La présente invention peut être appliquée à un système embarqué.

    本開示は、ステレオカメラとミリ波レーダとを適切に同期して組み合わせることで、検出結果の精度を向上させることができるようにする信号処理装置、および信号処理方法、プログラム、移動体、並びに、信号処理システムに関する。 キャリブレーションにおいて、センサ部により、レーダ反射体と、マーカとを有する目標物を、撮影(取得)したステレオカメラ画像とレーダ像とが得られる時刻を、センサ部と目標物との距離を変化させながら取得し、同一距離となるステレオカメラ画像が得られる時刻とレーダ像が得られる時刻との差分となる時刻ズレ量として求めておく。物体検出時には、先に取得されるレーダ像をバッファリングし、時刻ズレ量だけ遅れて取得したステレオカメラ画像と併せて出力し、ステレオカメラ画像とレーダ像とを組み合わせて、高精度な検出物体距離画像を生成する。本開示は、車載システムに適用することができる。


    Access

    Download


    Export, share and cite



    Title :

    SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING METHOD, PROGRAM, MOVING BODY, AND SIGNAL PROCESSING SYSTEM


    Additional title:

    DISPOSITIF DE TRAITEMENT DE SIGNAL, PROCÉDÉ DE TRAITEMENT DE SIGNAL, PROGRAMME, CORPS MOBILE ET SYSTÈME DE TRAITEMENT DE SIGNAL
    信号処理装置、および信号処理方法、プログラム、移動体、並びに、信号処理システム


    Contributors:

    Publication date :

    2019-02-28


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Japanese


    Classification :

    IPC:    G01S RADIO DIRECTION-FINDING , Funkpeilung / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS



    SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING METHOD, PROGRAM, MOVING BODY, AND SIGNAL PROCESSING SYSTEM

    YAMAZAKI TOSHIO / MOTOYAMA TAKUTO / DOBA KENTARO et al. | European Patent Office | 2023

    Free access

    SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING METHOD, PROGRAM, AND MOVING DEVICE

    ISHIKAWA TATSUYA / WANG CHAO | European Patent Office | 2021

    Free access

    SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING SYSTEM, SIGNAL PROCESSING METHOD, AND PROGRAM

    HIGASHIHARA KIYOSHI | European Patent Office | 2024

    Free access

    SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING SYSTEM, SIGNAL PROCESSING METHOD, AND PROGRAM

    HIGASHIBARA KIYOSHI | European Patent Office | 2024

    Free access

    SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING SYSTEM, SIGNAL PROCESSING METHOD, AND PROGRAM

    HIGASHIBARA KIYOSHI | European Patent Office | 2023

    Free access