A method, device and system of prediction of a state of an object in the environment using an action model of a neural network. In accordance with one aspect, a control system (115) for an object comprises a processor (102), a plurality of sensors (110) coupled to the processor (102) for sensing a current state of the object and an environment in which the object is located, and a first neural network (250) coupled to the processor (102). A plurality of predicted subsequent states of the object in the environment is obtained using an action model, a current state of the object in the environment and a plurality of actions. The action model maps a plurality of states of the object in the environment and a plurality of actions performed by the object for each state to predicted subsequent states of the object in the environment. An action that maximizes a value of a target is determined. The target is based at least on a reward for each of the predicted subsequent states. The determined action is performed.
L'invention concerne un procédé, un dispositif et un système de prédiction d'un état d'un objet dans l'environnement à l'aide d'un modèle d'action d'un réseau neuronal. Selon un aspect, un système de commande (115) pour un objet comprend un processeur (102), une pluralité de capteurs (110) couplés au processeur (102) pour détecter un état actuel de l'objet et un environnement dans lequel l'objet est situé, et un premier réseau neuronal (250) couplé au processeur (102). Une pluralité d'états ultérieurs prédits de l'objet dans l'environnement sont obtenus à l'aide d'un modèle d'action, d'un état actuel de l'objet dans l'environnement et d'une pluralité d'actions. Le modèle d'action mappe une pluralité d'états de l'objet dans l'environnement et une pluralité d'actions effectuées par l'objet pour chaque état vers des états ultérieurs prédits de l'objet dans l'environnement. Une action qui maximise une valeur d'une cible est déterminée. La cible est basée au moins sur une récompense pour chacun des états ultérieurs prédits. L'action déterminée est exécutée.
METHOD OF SELECTION OF AN ACTION FOR AN OBJECT USING A NEURAL NETWORK
PROCÉDÉ DE SÉLECTION D'UNE ACTION POUR UN OBJET À L'AIDE D'UN RÉSEAU NEURONAL
2019-04-11
Patent
Electronic Resource
English
IPC: | G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion |
Method of selection of an action for an object using a neural network
European Patent Office | 2021
|ACTION SELECTION DEVICE, ACTION SELECTION PROGRAM, AND ACTION SELECTION METHOD
European Patent Office | 2019
|European Patent Office | 2019
|European Patent Office | 2021
|