AUTOMATED ASSISTANT CONTROL OF NON-ASSISTANT APPLICATIONS VIA SYNONYMOUS TERM IDENTIFICATION

Implementations relate to an automated assistant that can interact with applications that may not have been pre-configured for interfacing with the automated assistant. The automated assistant can identify content of an application interface of the application to determine synonymous terms that a us...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: NOWAK-PRZYGODZKI, Marcin, COIMBRA, Adam, TAUBMAN, Gabriel, MOHAN, Vishwath, FIRMAN, Ilya, BAKIR, Gökhan, LANGE, Joseph, ENGER, Reed, SZMIGIEL, Jacek, STOUT, James, BAECHLER, Gilles, JIN, Yunfan, PEDERSEN, Kyle, SHARMA, Abhanshu, CHEN, Jindong, HUME, Thomas
Format: Patent
Sprache:eng ; fre
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:Implementations relate to an automated assistant that can interact with applications that may not have been pre-configured for interfacing with the automated assistant. The automated assistant can identify content of an application interface of the application to determine synonymous terms that a user may speak when commanding the automated assistant to perform certain tasks. Speech processing operations employed by the automated assistant can be biased towards these synonymous terms when the user is accessing an application interface of the application. In some implementations, the synonymous terms can be identified in a responsive language of the automated assistant when the content of the application interface is being rendered in a different language. This can allow the automated assistant to operate as an interface between the user and certain applications that may not be rendering content in a native language of the user. Des modes de réalisation concernent un assistant automatisé qui peut interagir avec des applications qui ne peuvent pas avoir été pré-configurées pour s'interfacer avec l'assistant automatisé. L'assistant automatisé peut identifier un contenu d'une interface d'application de l'application pour déterminer des termes synonymes qu'un utilisateur peut prononcer lors de la commande de l'assistant automatisé pour effectuer certaines tâches. Les opérations de traitement de la parole utilisées par l'assistant automatisé peuvent être orientées vers ces termes synonymes lorsque l'utilisateur accède à une interface d'application de l'application. Dans certains modes de réalisation, les termes synonymes peuvent être identifiés dans un langage de réponse de l'assistant automatisé lorsque le contenu de l'interface d'application est rendu dans une langue différente. Ceci peut permettre à l'assistant automatisé de fonctionner en tant qu'interface entre l'utilisateur et certaines applications qui ne peuvent pas rendre de contenu dans une langue maternelle de l'utilisateur.