ARTIFICIAL INTELLIGENCE DETERMINED EMOTIONAL STATE WITH DYNAMIC MODIFICATION OF OUTPUT OF AN INTERACTION APPLICATION

A method including receiving an input from a user for an interaction application that is executing. The method including receiving a first plurality of multimodal cues from a plurality of trackers, wherein each of the plurality of trackers is configured to track a corresponding cue using artificial intelligence. The method including providing the first plurality of multimodal cues to an artificial intelligence (Al) model configured to classify one or more emotions of a user, wherein the Al model generates a first predicted emotion based on the first plurality of multimodal cues. The method including determining a modification to content generated by the interaction application in response to the input, wherein the modification to the content is determined based on the predicted emotion. The method including providing the modification to the interaction application, wherein the interaction application is configured to generate modified content based on the modification. L'invention concerne un procédé comprenant la réception d'une entrée provenant d'un utilisateur pour une application d'interaction qui est en cours d'exécution. Le procédé comprend la réception d'une première pluralité de repères multimodaux à partir d'une pluralité de suiveurs, chacun de la pluralité de suiveurs étant configuré pour suivre un repère correspondant à l'aide d'une intelligence artificielle. Le procédé consiste à fournir la première pluralité de repères multimodaux à un modèle d'intelligence artificielle (lA) configuré pour classifier une ou plusieurs émotions d'un utilisateur, le modèle d'IA générant une première émotion prévue sur la base de la première pluralité de repères multimodaux. Le procédé consiste à déterminer une modification du contenu généré par l'application d'interaction en réponse à l'entrée, la modification du contenu étant déterminée sur la base de l'émotion prévue. Le procédé consiste à fournir la modification à l'application d'interaction, l'application d'interaction étant configurée pour générer un contenu modifié sur la base de la modification.