The present disclosure relates to methods and systems for spatiotemporal graph modelling of road users in observed frames of an environment in which an autonomous vehicle operates (i.e. a traffic scene), clustering of the road users into categories, and providing the spatiotemporal graph to a trained graphical convolutional neural network (GNN) to predict a future pedestrian action. The future pedestrian action can be: one of the pedestrian will cross a road and the pedestrian will not cross the road. The spatiotemporal graph includes a better understanding of the observed frames (i.e. traffic scene).

    La présente invention concerne des procédés et des systèmes de modélisation graphique spatiotemporel d'usagers de la route dans des trames observées d'un environnement dans lequel fonctionne un véhicule autonome (c'est-à-dire une scène de trafic), de regroupement des usagers de la route en catégories, et de fourniture du graphique spatiotemporel à un réseau neuronal à convolution graphique entraîné (GNN) pour prédire une future action de piéton. La future action de piéton peut être : l'un des piétons traverse une route et le piéton ne traverse pas la route. Le graphique spatiotemporel comprend une meilleure compréhension des trames observées (c'est-à-dire la scène de trafic).


    Access

    Download


    Export, share and cite



    Title :

    METHOD AND SYSTEM FOR GRAPH NEURAL NETWORK BASED PEDESTRIAN ACTION PREDICTION IN AUTONOMOUS DRIVING SYSTEMS


    Additional title:

    PROCÉDÉ ET SYSTÈME DE PRÉDICTION D'ACTION DE PIÉTON BASÉE SUR UN RÉSEAU NEURONAL DE GRAPHIQUE DANS DES SYSTÈMES DE CONDUITE AUTONOME


    Contributors:

    Publication date :

    2022-05-05


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    English


    Classification :

    IPC:    B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / B60R Fahrzeuge, Fahrzeugausstattung oder Fahrzeugteile, soweit nicht anderweitig vorgesehen , VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / G06V



    METHOD AND SYSTEM FOR GRAPH NEURAL NETWORK BASED PEDESTRIAN ACTION PREDICTION IN AUTONOMOUS DRIVING SYSTEMS

    MALEKMOHAMMADI SABER / YAU TIFFANY YEE KAY / RASOULI AMIR et al. | European Patent Office | 2023

    Free access

    Method and system for pedestrian motion prediction based on graph neural network in automatic driving system

    MALAKHAMADI SABO / YEW TIFFANY YEE KAI / RASOULI AMIR et al. | European Patent Office | 2024

    Free access

    Multiple Goals Network for Pedestrian Trajectory Prediction in Autonomous Driving

    Chen, Weihuang / Zheng, Fang / Shi, Liushuai et al. | IEEE | 2022


    PEDESTRIAN ACTION PREDICTION DEVICE AND PEDESTRIAN ACTION PREDICTION METHOD

    KINDO TOSHIKI / OGAWA MASAHIRO / FUNAYAMA RYUJI | European Patent Office | 2018

    Free access