The present disclosure relates to methods and systems for spatiotemporal graph modelling of road users in observed frames of an environment in which an autonomous vehicle operates (i.e. a traffic scene), clustering of the road users into categories, and providing the spatiotemporal graph to a trained graphical convolutional neural network (GNN) to predict a future pedestrian action. The future pedestrian action can be: one of the pedestrian will cross a road and the pedestrian will not cross the road. The spatiotemporal graph includes a better understanding of the observed frames (i.e. traffic scene).
La présente invention concerne des procédés et des systèmes de modélisation graphique spatiotemporel d'usagers de la route dans des trames observées d'un environnement dans lequel fonctionne un véhicule autonome (c'est-à-dire une scène de trafic), de regroupement des usagers de la route en catégories, et de fourniture du graphique spatiotemporel à un réseau neuronal à convolution graphique entraîné (GNN) pour prédire une future action de piéton. La future action de piéton peut être : l'un des piétons traverse une route et le piéton ne traverse pas la route. Le graphique spatiotemporel comprend une meilleure compréhension des trames observées (c'est-à-dire la scène de trafic).
METHOD AND SYSTEM FOR GRAPH NEURAL NETWORK BASED PEDESTRIAN ACTION PREDICTION IN AUTONOMOUS DRIVING SYSTEMS
PROCÉDÉ ET SYSTÈME DE PRÉDICTION D'ACTION DE PIÉTON BASÉE SUR UN RÉSEAU NEURONAL DE GRAPHIQUE DANS DES SYSTÈMES DE CONDUITE AUTONOME
2022-05-05
Patent
Elektronische Ressource
Englisch
IPC: | B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / B60R Fahrzeuge, Fahrzeugausstattung oder Fahrzeugteile, soweit nicht anderweitig vorgesehen , VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / G06V |
Europäisches Patentamt | 2023
|Europäisches Patentamt | 2024
|PEDESTRIAN ACTION PREDICTION DEVICE AND PEDESTRIAN ACTION PREDICTION METHOD
Europäisches Patentamt | 2018
|