PERSONALIZED APHASIA COMMUNICATION ASSISTANT SYSTEM

Methods and systems for improving communication involving a personal with aphasia are disclosed. The methods and systems include: obtaining an audio input indicative of speech of the person with aphasia; providing the audio input to a personalized aphasia translation assistant, wherein the personalized aphasia translation assistant was trained to recognize and translate speech of the person with aphasia using a general dataset of aphasia-speech; determining a plurality of words from the audio input using an aphasia-specific recognition model; inputting the plurality of words into an aphasia generative model, the aphasia generative model comprising a natural language processing machine learning model trained using a general dataset of aphasia sentences and a corresponding dataset of translated sentences; generating one or more formulated and contextual sentences using the personalized aphasia generative assistant; and outputting the one or more formulated and contextual sentences. A further method provides the training of a personalized aphasia communication assistant, in particular the adaptation of a pre-trained speech recognition model and of a pre-trained generative speech model based on predicted text and a user confirmation feedback of the accuracy of the predicted text. Des procédés et des systèmes, destinés à améliorer la communication impliquant une personne atteinte d'aphasie, sont divulgués. Les procédés et les systèmes comprennent les étapes consistant à : obtenir une entrée audio indiquant le discours de la personne atteinte d'aphasie ; fournir l'entrée audio à un assistant personnalisé de traduction pour l'aphasie, l'assistant personnalisé de traduction pour l'aphasie ayant été entraîné pour reconnaître et traduire le discours de la personne atteinte d'aphasie à l'aide d'un ensemble général de données de discours de type aphasique ; déterminer une pluralité de mots à partir de l'entrée audio à l'aide d'un modèle de reconnaissance spécifique de l'aphasie ; entrer la pluralité de mots dans un modèle génératif pour l'aphasie, le modèle génératif pour l'aphasie comprenant un modèle d'apprentissage automatique de traitement de langage naturel, formé à l'aide d'un ensemble général de données de phrases de type aphasique et d'un ensemble de données correspondant de phrases traduites ; générer une ou plusieurs phrases formulées et contextuelles à l'aide de l'assistant personnalisé génératif pour l'aphasie ; et délivrer la ou les phrases formulées et c