A technique for providing multi-sensory content receives input information that expresses a physiological state and experienced emotional state of a user. The technique generates prompt information that describes at least an objective of guidance to be delivered and the input information. The technique maps the prompt information to output information using a pattern completion component. The output information contains control instructions for controlling an output system to deliver the guidance via generated content. In some implementations, the pattern completion component is a machine-trained pattern completion model. In some implementations, a reward-driven machine-trained model further processes the input information and/or the output information. The reward-driven machine-trained model is trained by reinforcement learning to promote the objective of the guidance. In other implementations, the reward-driven machine-trained model operates by itself, without the pattern completion component.
L'invention concerne une technique pour la fourniture d'un contenu multisensoriel, qui reçoit des informations d'entrée qui expriment un état physiologique et un état émotionnel éprouvé d'un utilisateur. La technique génère des informations d'invite qui décrivent au moins un objectif de guidage devant être émis et les informations d'entrée. La technique met en correspondance les informations d'invite avec des informations de sortie à l'aide d'un composant de réalisation de motif. Les informations de sortie contiennent des instructions de commande pour la commande d'un système de sortie pour émettre le guidage par l'intermédiaire d'un contenu généré. Dans certains modes de réalisation, le composant de réalisation de motif est un modèle de réalisation de motif entraîné par machine. Dans certains modes de réalisation, un modèle entraîné par machine à pilotage par récompense traite en outre les informations d'entrée et/ou les informations de sortie. Le modèle entraîné par machine à pilotage par récompense est entraîné par apprentissage par renforcement pour favoriser l'objectif du guidage. Dans d'autres modes de réalisation, le modèle entraîné par machine à pilotage par récompense fonctionne de lui-même, sans le composant de réalisation de motif.
GENERATING MULTI-SENSORY CONTENT BASED ON USER STATE
GÉNÉRATION DE CONTENU MULTI-SENSORIEL SUR LA BASE D'UN ÉTAT D'UTILISATEUR
2024-09-06
Patent
Electronic Resource
English
IPC: | G16H Medizinische Informatik, d.h. Informations- und Kommunikationstechnik [IKT] besonders ausgebildet für die Handhabung oder Verarbeitung medizinischer oder auf das Gesundheitswesen bezogener Daten , HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA / A61B DIAGNOSIS , Diagnostik / B60H ARRANGEMENTS OR ADAPTATIONS OF HEATING, COOLING, VENTILATING, OR OTHER AIR-TREATING DEVICES SPECIALLY FOR PASSENGER OR GOODS SPACES OF VEHICLES , Anordnung oder Einbau der Heizung, Kühlung, Lüftung oder anderer Luftbehandlungsvorrichtungen für die Fahrzeugräume für Reisende oder Fracht / G06F ELECTRIC DIGITAL DATA PROCESSING , Elektrische digitale Datenverarbeitung / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / G10L Analyse oder Synthese von Sprache , SPEECH ANALYSIS OR SYNTHESIS / H05B ELECTRIC HEATING , Elektrische Heizung |
Vehicle Multi-sensory User Interaction Design Research Based on MINDS Methods
Springer Verlag | 2019
|MODIFYING MEDIA CONTENT PLAYBACK BASED ON USER MENTAL STATE
European Patent Office | 2024
|Method and device for generating natural language based on user state
European Patent Office | 2023
|