The present invention relates to a multi-sensor fusion-based driver monitoring apparatus and method. The multi-sensor fusion-based driver monitoring apparatus according to the present invention comprises: an information collecting unit for collecting the front image information and biometric information of a driver; a preprocessing unit for preprocessing the front image information and the biometric information; a shape vector generating unit for extracting respective feature vectors based on the front image information and the biometric information, which are preprocessed by the preprocessing unit, and generating a shape vector by combining the respective feature vectors; a determining unit for determining the emotions and behaviors of the driver based on the shape vector; and an output unit for outputting the emotions and behaviors of the driver, wherein the emotions and behaviors of the driver are monitored and output so that the efficiency of the autonomous vehicle can be increased.

    본 발명은 다중 센서 융합기반 운전자 모니터링 장치 및 방법에 관한 것으로, 본 발명에 따른 다중 센서 융합기반 운전자 모니터링 장치는 운전자의 전면 영상 정보 및 생체 정보를 수집하는 정보 수집부; 상기 전면 영상 정보 및 생체 정보를 전처리하는 전처리부; 상기 전처리부에서 전처리된 상기 전면 영상 정보 및 생체 정보에 기초하여 각각의 특성 벡터를 추출하고, 상기 각각의 특성 벡터를 결합하여 형상 벡터를 생성하는 형상 벡터 생성부; 상기 형상 벡터에 기초하여 상기 운전자의 감정 및 행동을 판단하는 판단부; 및 상기 운전자의 감정 및 행동을 출력하는 출력부;를 포함하여 자율주행 차량의 효율성이 증대될 수 있도록 운전자의 감정 및 행동을 모니터링하여 출력한다.


    Access

    Download


    Export, share and cite



    Title :

    MULTI SENSOR FUSION-BASED DRIVER MONITORING DEVICE AND METHOD


    Additional title:

    다중 센서 융합기반 운전자 모니터링 장치 및 방법


    Contributors:

    Publication date :

    2023-08-28


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Korean


    Classification :

    IPC:    B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion



    MULTI SENSOR FUSION-BASED DRIVER MONITORING DEVICE AND METHOD

    European Patent Office | 2023

    Free access

    MULTI-SENSOR FUSION-BASED DRIVER MONITORING APPARATUS AND METHOD

    HAN DONGSEOG / ALWIN POULOSE | European Patent Office | 2023

    Free access

    Driver state monitoring method and system based on multi-sensor fusion

    ZHANG YINGWU / TAO XUEXIN / ZHANG WEI | European Patent Office | 2020

    Free access


    Multi-sensor driver drowsiness monitoring

    Boyraz,P. / Acar,M. / Kerr,D. et al. | Automotive engineering | 2008