EYEWEAR WITH TRANSLATION FROM SPEECH SIGNALS TO IMAGES OF MOVEABLE LIPS FOR OVERLAY ON A DISPLAY

Eyewear having a speech to moving lips algorithm that receives and translates speech and utterances of a person viewed through the eyewear, and then displays an overlay of moving lips corresponding to the speech and utterances on a mask of the viewed person. A database having text to moving lips information is utilized to translate the speech and generate the moving lips in near-real time with little latency. This translation provides the deaf/hearing impaired users the ability to understand and communicate with the person viewed through the eyewear when they are wearing a mask. The translation may include automatic speech recognition (ASR) and natural language understanding (NLU) as a sound recognition engine. Des lunettes ayant un algorithme parole-en-lèvres en mouvement qui reçoit et traduit la parole et les énoncés d'une personne vue à travers les lunettes, et affiche ensuite une superposition de lèvres en mouvement correspondant aux paroles et aux énoncés sur un masque de la personne visualisée. Une base de données ayant un texte pour des informations de lèvres en mouvement est utilisée pour traduire la parole et générer les lèvres en mouvement en temps quasi réel avec une faible latence. Cette traduction permet aux utilisateurs sourds/malentendants de comprendre et de communiquer avec la personne vue à travers les lunettes lorsqu'ils portent un masque. La traduction peut comprendre une reconnaissance automatique de la parole (RAP) et une compréhension de langage naturel (NLU) en tant que moteur de reconnaissance de son.