TRACKING HAND GESTURES FOR INTERACTIVE GAME CONTROL IN AUGMENTED REALITY

Example systems, devices, media, and methods are described for presenting an interactive game in augmented reality on the display of a smart eyewear device. A hand tracking utility detects and tracks the location of hand gestures in real time, based on high-definition video data. The detected hand g...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: CANBERK, Ilteris, SYDORAN, Artur, HOVOROV, Dmytro, KUCHER, Dmytro
Format: Patent
Sprache:eng ; fre
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:Example systems, devices, media, and methods are described for presenting an interactive game in augmented reality on the display of a smart eyewear device. A hand tracking utility detects and tracks the location of hand gestures in real time, based on high-definition video data. The detected hand gestures are compared to library of hand gestures and landmarks. Examples include synchronized, multi-player games in which each device detects and shares hand gestures with other devices for evaluation and scoring. A single-player example includes gesture-shaped icons presented on a virtual scroll that appears to move toward an apparent collision with corresponding key images, awarding points if the player's hand is located near the apparent collision and the detected hand shape matches the moving icon. L'invention concerne des systèmes, des dispositifs, des supports et des procédés donnés à titre d'exemple permettant de présenter un jeu interactif en réalité augmentée sur l'afficheur d'un dispositif de lunetterie intelligent. Un utilitaire de suivi de main détecte et suit en temps réel la position de gestes de main, sur la base de données vidéo à haute définition. Les gestes de main détectés sont comparés à une bibliothèque de gestes de main et de points de repère. Des exemples comprennent des jeux multijoueurs synchronisés dans lesquels chaque dispositif détecte et partage des gestes de main avec d'autres dispositifs à des fins d'évaluation et de notation. Un exemple à un seul joueur fait appel à des icônes en forme de geste présentées sur un environnement de défilement virtuel qui semble se déplacer vers une collision apparente avec des images clés correspondantes, attribuant des points si la main du joueur est située à proximité de la collision apparente et si la forme de la main détectée correspond à l'icône se déplaçant.