ARTIFICIAL REALITY INPUT USING MULTIPLE MODALITIES

Aspects of the disclosure are directed to an interface for receiving input using multiple modalities in an artificial reality environment. The interface can be a virtual keyboard displayed in an artificial reality environment that includes characters arranged as elements. Implementations include an artificial reality device/system for displaying the artificial reality environment and receiving user input in a first modality, and a controller device for receiving user input in an additional input modality. For example, the artificial reality system can be configured to receive user gaze input as a first input modality and the controller device can be configured to receive input in a second modality, such as touch input received at a trackpad. An interface manager can process input in the multiple modalities to control an indicator on the virtual interface. The interface manager can also resolve character selections from the virtual interface according to the input. Des aspects de la divulgation concernent une interface pour recevoir une entrée à l'aide de multiples modalités dans un environnement de réalité artificielle. L'interface peut être un clavier virtuel affiché dans un environnement de réalité artificielle qui comprend des caractères agencés en tant qu'éléments. Des modes de réalisation comprennent un dispositif/système de réalité artificielle pour afficher l'environnement de réalité artificielle et recevoir une entrée d'utilisateur dans une première modalité, et un dispositif de commande pour recevoir une entrée d'utilisateur dans une modalité d'entrée supplémentaire. Par exemple, le système de réalité artificielle peut être configuré pour recevoir une entrée de regard d'utilisateur en tant que première modalité d'entrée et le dispositif de commande peut être configuré pour recevoir une entrée dans une seconde modalité, telle qu'une entrée tactile reçue au niveau d'un pavé tactile. Un gestionnaire d'interface peut traiter une entrée dans les multiples modalités pour commander un indicateur sur l'interface virtuelle. Le gestionnaire d'interface peut également résoudre des sélections de caractères à partir de l'interface virtuelle en fonction de l'entrée.