The purpose of the present invention is to provide an operator determination apparatus and an operator determination method whereby it is possible to accurately determine an operator who operates a device installed in a vehicle. This operator determination apparatus comprises: an image acquisition unit that acquires an image of an occupant in a vehicle captured by a camera; a facial feature point estimation unit that estimates the facial feature points of the occupant on the basis of the image; a head position estimation unit that estimates the relative position of the occupant's head with respect to the camera on the basis of the facial feature points; a part estimation unit that estimates the size of the plurality of parts of the occupant in the image on the basis of the image; a skeletal estimation unit that estimates the skeleton of the occupant on the basis of the relative position of the occupant's head and the size of each of the parts; a predictive operation estimation unit that estimates a predictive operation that indicates a predictive sign that the occupant will operate the device installed in the vehicle, on the basis of the movement of the skeleton; and an operator determination unit that determines the occupant who operates the device on the basis of the predictive operation.

    L'objectif de la présente invention est de fournir un appareil de détermination d'opérateur et un procédé de détermination d'opérateur grâce auxquels il est possible de déterminer avec précision un opérateur qui actionne un dispositif installé dans un véhicule. L'appareil de détermination d'opérateur selon l'invention comprend : une unité d'acquisition d'image qui acquiert une image d'un occupant dans un véhicule capturé par une caméra ; une unité d'estimation de point de caractéristique faciale qui estime les points de caractéristiques faciales de l'occupant sur la base de l'image ; une unité d'estimation de position de tête qui estime la position relative de la tête de l'occupant par rapport à la caméra sur la base des points de caractéristiques faciales ; une unité d'estimation de partie qui estime la taille de la pluralité de parties de l'occupant dans l'image sur la base de l'image ; une unité d'estimation de squelette qui estime le squelette de l'occupant sur la base de la position relative de la tête de l'occupant et de la taille de chacune des parties ; une unité d'estimation d'opération prédictive qui estime une opération prédictive qui indique un signe prédictif selon lequel l'occupant actionnera le dispositif installé dans le véhicule, sur la base du mouvement du squelette ; et une unité de détermination d'opérateur qui détermine l'occupant qui actionne le dispositif sur la base de l'opération prédictive.

    本発明は、車両内に設置された機器を操作する操作者を正確に判定することが可能な操作者判定装置および操作者判定方法を提供することを目的とする。本発明による操作者判定装置は、カメラが撮影した車両内の乗員の画像を取得する画像取得部と、画像に基づいて乗員の顔の特徴点を推定する顔特徴点推定部と、顔の特徴点に基づいてカメラに対する乗員の頭の相対的な位置を推定する頭位置推定部と、画像に基づいて画像における乗員の複数の部位の大きさを推定する部位推定部と、乗員の頭の相対的な位置と各部位の大きさとに基づいて乗員の骨格を推定する骨格推定部と、骨格の動きに基づいて乗員が車両内に設置された機器を操作する予兆を示す予兆操作を推定する予兆操作推定部と、予兆操作に基づいて機器を操作する乗員を判定する操作者判定部とを備える。


    Access

    Download


    Export, share and cite



    Title :

    OPERATOR DETERMINATION APPARATUS AND OPERATOR DETERMINATION METHOD


    Additional title:

    APPAREIL DE DÉTERMINATION D'OPÉRATEUR ET PROCÉDÉ DE DÉTERMINATION D'OPÉRATEUR
    操作者判定装置および操作者判定方法


    Contributors:

    Publication date :

    2021-03-11


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Japanese


    Classification :

    IPC:    B60R Fahrzeuge, Fahrzeugausstattung oder Fahrzeugteile, soweit nicht anderweitig vorgesehen , VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR / G06F ELECTRIC DIGITAL DATA PROCESSING , Elektrische digitale Datenverarbeitung / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL



    OPERATOR STATE DETERMINATION DEVICE AND OPERATOR STATE DETERMINATION METHOD

    ARAI JUNICHIRO / GOTO HISASHI / IWAKAME MAKOTO et al. | European Patent Office | 2017

    Free access

    OPERATOR DETERMINATION DEVICE

    INAMI YUICHI / MIMURA HIRONORI | European Patent Office | 2017

    Free access

    OPERATOR DETERMINATION DEVICE

    NAWA YUKI | European Patent Office | 2016

    Free access

    OPERATOR DETERMINATION DEVICE

    MIMURA HIRONORI / INAMI YUICHI / OWAKI SATOKIMI | European Patent Office | 2017

    Free access

    OPERATOR DETERMINATION DEVICE

    OWAKI SATOKIMI / MIMURA HIRONORI / INAMI YUICHI | European Patent Office | 2017

    Free access