AUTOMATISIERTE ERZEUGUNG VON PLÄNEN FÜR SELBSTGELEITETE AUGMENTED-REALITY-SITZUNGEN AUS FERNGELEITETEN AUGMENTED-REALITY-SITZUNGEN

Erzeugen einer selbstgeleiteten Augmented-Reality(AR)-Sitzung aus einem Plan für eine selbstgeleitete AR-Sitzung, die zwischen einem entfernten Benutzer und einem lokalen Benutzer stattfindet, durch ein: Empfangen von Daten, die während der ferngeleiteten AR-Sitzung aufgezeichnet werden. Segmentiere...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: Raz Goldfarb, Adi, Bilgory, Erez Lev Meir
Format: Patent
Sprache:ger
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:Erzeugen einer selbstgeleiteten Augmented-Reality(AR)-Sitzung aus einem Plan für eine selbstgeleitete AR-Sitzung, die zwischen einem entfernten Benutzer und einem lokalen Benutzer stattfindet, durch ein: Empfangen von Daten, die während der ferngeleiteten AR-Sitzung aufgezeichnet werden. Segmentieren der Daten in zeitliche Segmente, die Schritten entsprechen, welche durch den lokalen Benutzer während der ferngeleiteten AR-Sitzung durchgeführt werden. Die Schritte werden erkannt, indem mindestens eines verwendet wird eines: Algorithmus für das Verstehen natürlicher Sprache (Natural Language Understanding, NLU), der auf eine Konversation angewendet wird, um Äußerungen zu erkennen, die auf einen Wechsel Schritt-um-Schritt hinweisen, einer Positionsanalyse von Anmerkungen, die in den Daten enthalten sind, um Positionsunterschiede zu erkennen, die auf einen Wechsel Schritt-um-Schritt hinweisen, und einer Analyse der in den Daten enthaltenen Kamerastellungsdaten, um Stellungswechsel zu erkennen, die auf einen Wechsel Schritt-um-Schritt hinweisen. Erzeugen des Plans für eine selbstgeleitete AR-Sitzung auf Grundlage der segmentierten Daten und einer dreidimensionalen (3D)-Darstellung der Szene, wobei der AR-Sitzungsplan eine schrittweise erfolgende AR-Anleitung dazu aufweist, wie die mehreren Schritte der Szene durchzuführen sind. Generating a self-guided augmented reality (AR) session plan from a remotely-guided AR session held between a remote user and a local user, by: Receiving data recorded during the remotely-guided AR session. Segmenting the data into temporal segments that correspond to steps performed by the local user during the remotely-guided AR session. The steps are detected using at least one of: a Natural-Language Understanding (NLU) algorithm applied to a conversation included in the data, to detect utterances indicative of step-to-step transitions; location analysis of annotations included in the data, to detect location differences indicative of step-to-step transitions; and analysis of camera pose data included in the data, to detect pose transitions indicative of step-to-step transitions. Generating the self-guided AR session plan based on the segmented data and a 3D representation of the scene, the AR session plan including step-by-step AR guidance on how to perform the various steps.