A computer implemented method for controlling a system moving through an environment includes receiving a stream of event data from an event camera, the stream of event data representing a pixel location, a time stamp, and a polarity for each event detected by the event camera. A compressed representation of the stream of data is generated. The compressed representation is provided to a neural network model trained on prior compressed representations using reinforcement learning to learn actions for controlling the system. A control action is generated via the neural network model to control the movement of the system.

    Procédé mis en œuvre par ordinateur pour commander un système se déplaçant à travers un environnement comprenant la réception d'un flux de données d'événement provenant d'une caméra d'événement, le flux de données d'événement représentant un emplacement de pixel, un horodatage et une polarité pour chaque événement détecté par la caméra d'événement. Une représentation compressée du flux de données est générée. La représentation compressée est fournie à un modèle de réseau de neurones artificiels entraîné sur des représentations compressées antérieures à l'aide d'un apprentissage par renforcement pour apprendre des actions pour commander le système. Une action de commande est générée par l'intermédiaire du modèle de réseau de neurones artificiels pour commander le mouvement du système.


    Access

    Download


    Export, share and cite



    Title :

    EVENT CAMERA BASED NAVIGATION CONTROL


    Additional title:

    COMMANDE DE NAVIGATION BASÉE SUR UNE CAMÉRA D'ÉVÉNEMENT


    Contributors:

    Publication date :

    2022-06-23


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    English


    Classification :

    IPC:    G05D SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES , Systeme zum Steuern oder Regeln nichtelektrischer veränderlicher Größen / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS



    Event Camera Based Navigation Control

    VEMPRALA SAI HEMACHANDRA / MIAN SAMI T / KAPOOR ASHISH | European Patent Office | 2022

    Free access

    Event camera based navigation control

    VEMPRALA SAI HEMACHANDRA / MIAN SAMI TARIQ / KAPOOR ASHISH | European Patent Office | 2023

    Free access

    Integrated Camera-Based Navigation

    Hafskjold, Brita Helene | Online Contents | 2000


    Event camera hardware

    BARTHA LORANT / ZAHARIA CORNELIU / GEORGESCU VLAD et al. | European Patent Office | 2022

    Free access

    EVENT CAMERA HARDWARE

    BARTHA LORANT / ZAHARIA CORNELIU / GEORGESCU VLAD et al. | European Patent Office | 2022

    Free access