Systems, methods, and computer-readable media for dynamic changes to both a learned control policy in the event of a change in the environment (e.g., introduction of a new or unseen obstacle). Rather than having to implement an entirely new policy (and a new global Q table), which can delay performance of tasks by agent(s), the present embodiments allow for a reduced delay in updating local Q table(s) based on detection of a new change in the environment. Locally changing the policy allows for more efficient updating of the policy based on changes in the environment, rather than globally changing the Q table after each change. Particularly in an event with multiple changes in the environment, the present embodiments increase efficiency in updating local and global Q tables while also reducing a delay in providing new instructions to the agent(s) in completing tasks.
L'invention concerne des systèmes, des procédés et des supports lisibles par ordinateur pour des changements dynamiques touchant une politique de commande apprise en cas d'un changement dans l'environnement (par exemple, l'introduction d'un nouvel obstacle ou d'un obstacle non vu). Plutôt que d'avoir à mettre en œuvre une politique entièrement nouvelle (et une nouvelle table Q globale), ce qui peut retarder la réalisation de tâches par un ou plusieurs agents, les présents modes de réalisation permettent un délai réduit pour la mise à jour d'une ou plusieurs tables Q locales sur la base de la détection d'un nouveau changement dans l'environnement. Le changement local de la politique permet une mise à jour plus efficace de la politique en cas de changements dans l'environnement, par rapport à un changement global de la table Q après chaque changement. En particulier, lors d'un événement impliquant de multiples changements dans l'environnement, les présents modes de réalisation augmentent l'efficacité de la mise à jour des tables Q locales et globales tout en réduisant également le délai de fourniture à l'agent ou aux agents de nouvelles instructions pour la réalisation de tâches.
ADAPTIVE Q LEARNING IN DYNAMICALLY CHANGING ENVIRONMENTS
Q-LEARNING ADAPTATIF DANS DES ENVIRONNEMENTS CHANGEANT DYNAMIQUEMENT
2024-09-19
Patent
Electronic Resource
English
Adaptive multiple target attack planning in dynamically changing hostile environments
Tema Archive | 1990
|Adaptive Particle Swarm Algorithm with Dynamically Changing Inertia Weight
British Library Online Contents | 2005
|Double action Q-learning for obstacle avoidance in a dynamically changing environment
BASE | 2005
|