The present teaching relates to system, method, medium for in-situ perception in an autonomous driving vehicle. A plurality of types of sensor data acquired continuously by a plurality of types of sensors deployed on the vehicle are first received, where the plurality of types of sensor data provide information about surrounding of the vehicle. Based on at least one model, one or more items are tracked from a first of the plurality of types of sensor data acquired by one or more of a first type of the plurality of types of sensors, wherein the one or more items appear in the surrounding of the vehicle. At least some of the one or more items are then automatically labeled on-the-fly via either cross modality validation or cross temporal validation of the one or more items and are used to locally adapt, on-the-fly, the at least one model in the vehicle.
La présente invention concerne un système, un procédé et un support de perception in situ dans un véhicule à conduite autonome. Une pluralité de types de données de capteurs acquises en continu par une pluralité de types de capteurs déployés sur le véhicule est d'abord reçue, la pluralité de types de données de capteurs fournissant des informations concernant l'environnement du véhicule. Sur la base d'au moins un modèle, un ou plusieurs éléments sont suivis à partir d'un premier type de la pluralité de types de données de capteurs acquises par un ou plusieurs types d'un premier type de la pluralité de types de capteurs, le ou les éléments apparaissant dans l'environnement du véhicule. Au moins certains du ou des éléments sont ensuite automatiquement étiquetés à la volée par l'intermédiaire d'une validation à modalité croisée ou d'une validation temporelle croisée du ou des éléments et sont utilisés pour adapter localement, à la volée, le ou les modèles dans le véhicule.
METHOD AND SYSTEM FOR DISTRIBUTED LEARNING AND ADAPTATION IN AUTONOMOUS DRIVING VEHICLES
PROCÉDÉ ET SYSTÈME D'APPRENTISSAGE ET D'ADAPTATION DISTRIBUÉS DANS DES VÉHICULES À CONDUITE AUTONOME
2018-12-13
Patent
Elektronische Ressource
Englisch
IPC: | G05D SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES , Systeme zum Steuern oder Regeln nichtelektrischer veränderlicher Größen / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / G06V / G07C TIME OR ATTENDANCE REGISTERS , Zeit- oder Anwesenheitskontrollgeräte / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS / H04N PICTORIAL COMMUNICATION, e.g. TELEVISION , Bildübertragung, z.B. Fernsehen |
Adaptation of driving behavior of autonomous vehicles
Europäisches Patentamt | 2023
|DRIVING METHOD OF AUTONOMOUS VEHICLES AND AUTONOMOUS VEHICLES
Europäisches Patentamt | 2021
|DISTRIBUTED TRAFFIC SCHEDULING FOR AUTONOMOUS SELF-DRIVING VEHICLES
Europäisches Patentamt | 2020
|Distributed traffic scheduling for autonomous self-driving vehicles
Europäisches Patentamt | 2021
|