Methods, systems, and processor-readable media for adaptive cycle-level traffic signal control are described. An adaptive cycle-level traffic signal controller and control method that operate within a continuous action space. A reinforcement learning algorithm called Proximal Policy Optimization (PPO), which is a type of actor-critic model for reinforcement learning, may be used to generate signal cycle phase durations selected from a continuous range of values. The controller (220) thus does not treat the action space as discrete, but instead produces continuous values as output. The generated phase durations may define a full traffic signal cycle. The inputs to the controller (220) may indicate current and past states of the traffic environment (200). The average duration of delay of vehicles in the traffic environment may be used to calculate the reward for the reinforcement learning model (240) that drives the behavior of the controller (220).

    La présente invention concerne des procédés, des systèmes et des supports lisibles par un processeur pour une commande adaptative de feu de signalisation à niveau de cycle. L'invention concerne un dispositif de commande adaptative de feu de signalisation à niveau de cycle et un procédé de commande qui fonctionnent dans un espace d'action continu. Un algorithme d'apprentissage de renforcement appelé Optimisation de Politique Proximale (PPO), qui est un type de modèle acteur-critique pour l'apprentissage de renforcement, peut être utilisé pour générer des durées de phase de cycle de signal sélectionnées à partir d'une plage continue de valeurs. Le dispositif de commande (220) ne traite donc pas l'espace d'action comme discret, mais produit à la place des valeurs continues en tant que sortie. Les durées de phase générées peuvent définir un cycle complet de feu de signalisation. Les entrées dans le dispositif de commande (220) peuvent indiquer des états actuels et passés de l'environnement de trafic (200). La durée moyenne de retard de véhicules dans l'environnement de trafic peut être utilisée pour calculer la récompense pour le modèle d'apprentissage de renforcement (240) qui entraîne le comportement du dispositif de commande (220).


    Zugriff

    Download


    Exportieren, teilen und zitieren



    Titel :

    METHOD AND SYSTEM FOR ADAPTIVE CYCLE-LEVEL TRAFFIC SIGNAL CONTROL


    Weitere Titelangaben:

    PROCÉDÉ ET SYSTÈME DE COMMANDE ADAPTATIVE DE FEU DE SIGNALISATION À NIVEAU DE CYCLE


    Beteiligte:

    Erscheinungsdatum :

    2022-03-24


    Medientyp :

    Patent


    Format :

    Elektronische Ressource


    Sprache :

    Englisch


    Klassifikation :

    IPC:    G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS



    Method and system for adaptive cycle-level traffic signal control

    MOHAMAD ALIZADEH SHABESTARY SOHEIL / ABDULHAI BAHER / MA HAO HAI et al. | Europäisches Patentamt | 2023

    Freier Zugriff

    METHOD AND SYSTEM FOR ADAPTIVE CYCLE-LEVEL TRAFFIC SIGNAL CONTROL

    MOHAMAD ALIZADEH SHABESTARY SOHEIL / ABDULHAI BAHER / MA HAO HAI et al. | Europäisches Patentamt | 2022

    Freier Zugriff

    Method and system for adaptive periodic-level traffic signal control

    SOHEL MOHAMED ALIZADEH SHABESTARI / ABDELHAY BACH / MA HAOHAI et al. | Europäisches Patentamt | 2023

    Freier Zugriff

    Cycle-level vs. Second-by-Second Adaptive Traffic Signal Control using Deep Reinforcement Learning

    Shabestary, Soheil Mohamad Alizadeh / Abdulhai, Baher / Ma, Haohai et al. | IEEE | 2020


    Traffic signal machine adaptive control method, traffic signal machine and control system

    YANG PENG / LIN JIE / CHENG YAN et al. | Europäisches Patentamt | 2022

    Freier Zugriff