A method, device and system of prediction of a state of an object in the environment using an action model of a neural network. In accordance with one aspect, a control system (115) for an object comprises a processor (102), a plurality of sensors (110) coupled to the processor (102) for sensing a current state of the object and an environment in which the object is located, and a first neural network (250) coupled to the processor (102). A plurality of predicted subsequent states of the object in the environment is obtained using an action model, a current state of the object in the environment and a plurality of actions. The action model maps a plurality of states of the object in the environment and a plurality of actions performed by the object for each state to predicted subsequent states of the object in the environment. An action that maximizes a value of a target is determined. The target is based at least on a reward for each of the predicted subsequent states. The determined action is performed.

    L'invention concerne un procédé, un dispositif et un système de prédiction d'un état d'un objet dans l'environnement à l'aide d'un modèle d'action d'un réseau neuronal. Selon un aspect, un système de commande (115) pour un objet comprend un processeur (102), une pluralité de capteurs (110) couplés au processeur (102) pour détecter un état actuel de l'objet et un environnement dans lequel l'objet est situé, et un premier réseau neuronal (250) couplé au processeur (102). Une pluralité d'états ultérieurs prédits de l'objet dans l'environnement sont obtenus à l'aide d'un modèle d'action, d'un état actuel de l'objet dans l'environnement et d'une pluralité d'actions. Le modèle d'action mappe une pluralité d'états de l'objet dans l'environnement et une pluralité d'actions effectuées par l'objet pour chaque état vers des états ultérieurs prédits de l'objet dans l'environnement. Une action qui maximise une valeur d'une cible est déterminée. La cible est basée au moins sur une récompense pour chacun des états ultérieurs prédits. L'action déterminée est exécutée.


    Access

    Download


    Export, share and cite



    Title :

    METHOD OF SELECTION OF AN ACTION FOR AN OBJECT USING A NEURAL NETWORK


    Additional title:

    PROCÉDÉ DE SÉLECTION D'UNE ACTION POUR UN OBJET À L'AIDE D'UN RÉSEAU NEURONAL


    Contributors:

    Publication date :

    2019-04-11


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    English


    Classification :

    IPC:    G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion



    Method of selection of an action for an object using a neural network

    YAO HENGSHUAI / CHEN HAO / NOSRATI SEYED MASOUD et al. | European Patent Office | 2021

    Free access

    ACTION SELECTION DEVICE, ACTION SELECTION PROGRAM, AND ACTION SELECTION METHOD

    KASUGA TAKAFUMI / TANIMOTO MASAHIKO / SAWAMI TAKAYUKI et al. | European Patent Office | 2019

    Free access


    Method of prediction of a state of an object in the environment using an action model of a neural network

    YAO HENGSHUAI / NOSRATI SEYED MASOUD / CHEN HAO et al. | European Patent Office | 2021

    Free access

    SELECTION-INFERENCE NEURAL NETWORK SYSTEMS

    CRESWELL ANTONIA PHOEBE NINA | European Patent Office | 2023

    Free access