The present invention relates to a system invented to prevent an accident in a construction site, comprising: four cameras collecting image data; four pieces of radar collecting distance data; and a controller fusing deep learning with the distance data of the radar by using the image data inputted through the cameras. In accordance with the present invention, an image is acquired through the four cameras and the image data is transmitted to the controller based on GMSL2 communication standards; a distance is measured with the radar and the measured distance data is transmitted to the controller through CAN communication; an around-view image is created with four pieces of image data inputted through the controller and deep learning is performed through the image to perform a function of identifying an object; the controller performs the sensor fusion of the object identified through deep learning with the distance data inputted through the radar; and a moving average and a Kalman filter algorithm are applied to improve the accuracy of the distance data.

    본 발명은 건설현장에서 사고를 방지하고자 발명하였으며, 영상 데이터를 수집하는 4대의 카메라, 거리 데이터를 수집하는 4대의 레이더, 카메라를 통해서 입력된 영상 데이터를 사용하여 딥러닝과 레이더의 거리 데이터를 융합을 수행하는 제어기로 구성된다. 본 발명에는 4개의 카메라를 사용하여 영상을 획득하고 이 영상 데이터는 GMSL2 통신 규격을 사용하여 제어기에 전송하고, 레이더를 사용하여 거리를 측정하고 이 측정된 거리 데이터를 CAN 통신을 사용하여 제어기에 전송하고, 제어기를 통하여 입력된 4개의 영상 데이터를 사용하여 어라운드 뷰 영상을 만들고 그 영상을 통해서 딥러닝을 수행하여 물체를 구별하는 기능을 수행하고, 제어기는 딥러닝을 통하여 구별된 물체와의 레이더를 통해서 입력된 거리 데이터의 센서 융합을 실행하고, 거리 데이터의 정확도를 개선하기 위해서 이동 평균 및 칼만필터 알고리즘을 사용하였다.


    Zugriff

    Download


    Exportieren, teilen und zitieren



    Titel :

    / Systems and Methods for Improving Object Detection/Classification and Object Distance Measurement Performance Through Sensor Fusion


    Weitere Titelangaben:

    센서 융합을 통한 물체 감지/분류 및 물체 거리 측정 성능 향상을 위한 시스템 및 방법


    Beteiligte:
    KIM YONG JIN (Autor:in) / JI SEUNG HO (Autor:in)

    Erscheinungsdatum :

    2023-06-08


    Medientyp :

    Patent


    Format :

    Elektronische Ressource


    Sprache :

    Koreanisch


    Klassifikation :

    IPC:    B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / B60K Anordnung oder Einbau von Antriebseinheiten oder von Kraft- bzw. Drehmomentübertragungen in Fahrzeugen , ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES



    Active sensor fusion systems and methods for object detection

    YARLAGADDA PRADEEP KRISHNA / DURAND JEAN-GUILLAUME DOMINIQUE | Europäisches Patentamt | 2021

    Freier Zugriff

    Multiple Sensor Fusion and Classification for Moving Object Detection and Tracking

    Chavez-Garcia, Ricardo Omar / Aycard, Olivier | IEEE | 2016


    Sensor fusion for object-avoidance detection

    ZHANG SHAN / MANUKIAN NARBIK | Europäisches Patentamt | 2024

    Freier Zugriff

    Method and system for improving object detection and object classification

    SAMII SOHEIL / DUTTA BORDOLOI UNMESH / BAI FAN et al. | Europäisches Patentamt | 2020

    Freier Zugriff