The present invention relates to an autonomous driving reinforcement learning device of a vehicle and a method thereof. The device comprises: a driver intervention recognition unit recognizing operation intervention of a driver during autonomous driving of a vehicle; a vehicle information detection unit detecting state information of the vehicle and situation information around the vehicle using a plurality of sensors; a communication unit which receives traffic information for driving, stopping and lane change of the vehicle by communicating with traffic infrastructure or other vehicles, and communicates with a server performing an autonomous driving algorithm improvement operation through reinforcement learning, to transmit information necessary for the improvement operation, and receives an improved autonomous driving algorithm from the server; a control unit which determines, upon the operation intervention of the driver during the autonomous driving of the vehicle, whether the improvement of the autonomous driving algorithm is necessary by comparing the intervention operation information of the driver recognized by the driver intervention recognition unit with control information determined by the autonomous driving algorithm, and transmits information necessary for the improvement operation through the communication unit when the improvement is necessary; and the server performing an autonomous driving algorithm improvement operation through reinforcement learning using information transmitted in a wired or wireless manner through the communication unit.

    본 발명은 차량의 자율주행 강화학습 장치 및 방법에 관한 것으로, 상기 장치는, 차량의 자율주행 중 운전자의 조작 개입을 인식하는 운전자 개입 인식부; 상기 차량의 상태 정보 및 차량 주변의 상황 정보를 복수의 센서를 이용해 검출하는 차량정보 검출부; 교통 인프라 혹은 다른 차량과 통신하여 차량의 주행과 정지 및 차선 변경을 위한 교통정보를 수신하고, 강화학습을 통해 자율주행 알고리즘 개선 동작을 수행하는 서버와 통신하여 이 개선 동작에 필요한 정보를 전송하며, 개선 완료된 자율주행 알고리즘을 상기 서버로부터 전달받는 통신부; 차량의 자율주행 중 운전자의 조작 개입 시, 상기 운전자 개입 인식부를 통해 인식한 운전자의 개입 조작 정보와 자율주행 알고리즘에 의해 판단한 제어 정보를 비교하여 상기 자율주행 알고리즘의 개선이 필요한지 판단하고, 개선이 필요할 경우에 상기 통신부를 통해 개선 동작에 필요한 정보를 전송하게 하는 제어부; 및 상기 통신부를 통해 유무선 방식으로 전달되는 정보를 이용해 강화학습을 통해 자율주행 알고리즘 개선 동작을 수행하는 상기 서버;를 포함한다.


    Access

    Download


    Export, share and cite



    Title :

    AUTONOMOUS DRIVING REINFORCEMENT LEARNING APPARATUS AND METHOD OF VEHICLE


    Additional title:

    차량의 자율주행 강화학습 장치 및 방법


    Contributors:

    Publication date :

    2019-10-14


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Korean


    Classification :

    IPC:    G05D SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES , Systeme zum Steuern oder Regeln nichtelektrischer veränderlicher Größen / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion



    Autonomous Vehicle Driving Path Control with Deep Reinforcement Learning

    Tiong, Teckchai / Saad, Ismail / Teo, Kenneth Tze Kin et al. | IEEE | 2023


    PERSONALIZED VEHICLE OPERATION FOR AUTONOMOUS DRIVING WITH INVERSE REINFORCEMENT LEARNING

    ZHAO ZHOUQIAO / WANG ZIRAN / GUPTA ROHIT et al. | European Patent Office | 2023

    Free access

    Autonomous Driving with Deep Reinforcement Learning

    Zhu, Yuhua / Technische Universität Dresden | SLUB | 2023



    Intelligent driving vehicle autonomous parking system based on deep reinforcement learning

    CAO XIANGSHANG / LI YONG / ZHAO WEI | European Patent Office | 2024

    Free access