The present invention relates to a method for detecting an object by converging image data and radar data and an electronic apparatus. The method for detecting the object by converging the image data and the radar data of the present invention comprises the following steps of: detecting, by the electronic apparatus of a vehicle, a specific object using first image data and first radar data at a specific time point; detecting, by the electronic apparatus, visual object information of the road surface from second image data of a viewpoint after the specific time point; setting, by the electronic apparatus, a target region of interest for object detection based on the visual object information; and detecting, by the electronic apparatus, the specific object by using the second image data or the second radar data of a later view of the target region of interest. Specific object detection at a later time point further uses a detection result of the specific object obtained at the specific time point.

    영상 데이터 및 레이더 데이터를 융합하여 객체를 검출하는 방법은 차량의 전자장치가 특정 시점의 제1 영상 데이터 및 제1 레이더 데이터 각각을 이용하여 특정 객체를 검출하는 단계, 상기 전자장치가 상기 특정 시점 이후 시점의 제2 영상 데이터에서 도로 노면의 시각 객체 정보를 검출하는 단계, 상기 전자장치가 상기 시각 객체 정보를 기준으로 객체 검출을 위한 타깃 관심 영역을 설정하는 단계 및 상기 전자장치가 상기 타깃 관심 영역에 대한 상기 이후 시점의 제2 영상 데이터 또는 제2 레이더 데이터를 이용하여 상기 특정 객체를 검출하는 단계를 포함하되, 상기 이후 시점에서의 특정 객체 검출은 상기 특정 시점에서 획득한 상기 특정 객체의 검출 결과를 더 이용한다.


    Access

    Download


    Export, share and cite



    Title :

    OBJECT DETECTION METHOD BASED ON RADAR-CAMERA FUSION AND ELECTRONIC APPARATUS


    Additional title:

    영상 데이터 및 레이더 데이터를 융합하여 객체를 검출하는 방법 및 전자장치


    Contributors:

    Publication date :

    2022-07-19


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Korean


    Classification :

    IPC:    B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / B60R Fahrzeuge, Fahrzeugausstattung oder Fahrzeugteile, soweit nicht anderweitig vorgesehen , VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR / G01S RADIO DIRECTION-FINDING , Funkpeilung / G03B APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM , Geräte oder Anordnungen zum Aufnehmen, Projizieren oder Betrachten von Fotografien / H04N PICTORIAL COMMUNICATION, e.g. TELEVISION , Bildübertragung, z.B. Fernsehen



    Deep Learning-based Radar, Camera, and Lidar Fusion for Object Detection

    Nobis, Felix Otto Geronimo | TIBKAT | 2022

    Free access

    RVDet: Feature-level Fusion of Radar and Camera for Object Detection

    Zhang, Jingwei / Zhang, Ming / Fang, Zicheng et al. | IEEE | 2021


    3D Multi-Object Tracking Based on Radar-Camera Fusion

    Lin, Zihao / Hu, Jianming | IEEE | 2022


    A Concise Camera-Radar Fusion Framework for Object Detection and Data Association

    He, Yingjie / Zhao, Jian / Lyu, Nana et al. | British Library Conference Proceedings | 2022


    A Concise Camera-Radar Fusion Framework for Object Detection and Data Association

    Zhao, Jian / Li, Linhui / Lyu, Nana et al. | SAE Technical Papers | 2022