HUMAN-IN-THE-LOOP VOICE AUTOMATION SYSTEM
The present disclosure is directed to automating user interactions in an application. In particular, the computing device can determine, based on the input data, an intent associated with performing an action on the computing device. Additionally, the computing device can invoke, using an applicatio...
Gespeichert in:
| Hauptverfasser: | , , , , , , , , , , |
|---|---|
| Format: | Patent |
| Sprache: | eng ; fre |
| Schlagworte: | |
| Online-Zugang: | Volltext bestellen |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
| container_end_page | |
|---|---|
| container_issue | |
| container_start_page | |
| container_title | |
| container_volume | |
| creator | YIM, Keun Soo FIRMAN, Ilya TAUBMAN, Gabriel Oak COIMBRA, Adam Miller OH, Michael GANOV, Svetoslav Radoslavov ANDREICA, Mugurel-Ionut REUTOV, Mikhail DESINENI, Kalyana Ram BERRY, Robert James KUANG, Cliff Shan |
| description | The present disclosure is directed to automating user interactions in an application. In particular, the computing device can determine, based on the input data, an intent associated with performing an action on the computing device. Additionally, the computing device can invoke, using an application-level assistant component configured to provide an application-level interface on the computing device, execution of an application. Moreover, the computing device can transmit, to a system-level assistant component configured to provide a system-level interface with the computing device, instructions to interface with an actionable component of the application. The instructions can be transmitted using a trusted intermediary component configured to facilitate an interface between the system-level assistant component and the application-level assistant component. Furthermore, the computing device can engage, using the system-level assistant component, the actionable component of the application to perform the action.
La présente divulgation concerne l'automatisation d'interactions d'utilisateur dans une application. En particulier, le dispositif informatique peut déterminer, sur la base des données d'entrée, une intention associée à la réalisation d'une action sur le dispositif informatique. De plus, le dispositif informatique peut appeler, à l'aide d'un composant d'assistant de niveau application configuré pour fournir une interface de niveau application sur le dispositif informatique, l'exécution d'une application. De plus, le dispositif informatique peut transmettre, à un composant d'assistant de niveau système configuré pour fournir une interface de niveau système avec le dispositif informatique, des instructions pour être en interface avec un composant actionnable de l'application. Les instructions peuvent être transmises à l'aide d'un composant intermédiaire de confiance configuré pour faciliter une interface entre le composant d'assistant de niveau système et le composant d'assistant de niveau application. En outre, le dispositif informatique peut amener, à l'aide du composant d'assistant de niveau système, le composant actionnable de l'application à effectuer l'action. |
| format | Patent |
| fullrecord | <record><control><sourceid>epo_EVB</sourceid><recordid>TN_cdi_epo_espacenet_WO2023234931A1</recordid><sourceformat>XML</sourceformat><sourcesystem>PC</sourcesystem><sourcerecordid>WO2023234931A1</sourcerecordid><originalsourceid>FETCH-epo_espacenet_WO2023234931A13</originalsourceid><addsrcrecordid>eNrjZND0CPV19NP19NMN8XDV9fH3D1AI8_d0dlVwDA3x93UM8fT3UwiODA5x9eVhYE1LzClO5YXS3AzKbq4hzh66qQX58anFBYnJqXmpJfHh_kYGRsZGxiaWxoaOhsbEqQIAyYklaA</addsrcrecordid><sourcetype>Open Access Repository</sourcetype><iscdi>true</iscdi><recordtype>patent</recordtype></control><display><type>patent</type><title>HUMAN-IN-THE-LOOP VOICE AUTOMATION SYSTEM</title><source>esp@cenet</source><creator>YIM, Keun Soo ; FIRMAN, Ilya ; TAUBMAN, Gabriel Oak ; COIMBRA, Adam Miller ; OH, Michael ; GANOV, Svetoslav Radoslavov ; ANDREICA, Mugurel-Ionut ; REUTOV, Mikhail ; DESINENI, Kalyana Ram ; BERRY, Robert James ; KUANG, Cliff Shan</creator><creatorcontrib>YIM, Keun Soo ; FIRMAN, Ilya ; TAUBMAN, Gabriel Oak ; COIMBRA, Adam Miller ; OH, Michael ; GANOV, Svetoslav Radoslavov ; ANDREICA, Mugurel-Ionut ; REUTOV, Mikhail ; DESINENI, Kalyana Ram ; BERRY, Robert James ; KUANG, Cliff Shan</creatorcontrib><description>The present disclosure is directed to automating user interactions in an application. In particular, the computing device can determine, based on the input data, an intent associated with performing an action on the computing device. Additionally, the computing device can invoke, using an application-level assistant component configured to provide an application-level interface on the computing device, execution of an application. Moreover, the computing device can transmit, to a system-level assistant component configured to provide a system-level interface with the computing device, instructions to interface with an actionable component of the application. The instructions can be transmitted using a trusted intermediary component configured to facilitate an interface between the system-level assistant component and the application-level assistant component. Furthermore, the computing device can engage, using the system-level assistant component, the actionable component of the application to perform the action.
La présente divulgation concerne l'automatisation d'interactions d'utilisateur dans une application. En particulier, le dispositif informatique peut déterminer, sur la base des données d'entrée, une intention associée à la réalisation d'une action sur le dispositif informatique. De plus, le dispositif informatique peut appeler, à l'aide d'un composant d'assistant de niveau application configuré pour fournir une interface de niveau application sur le dispositif informatique, l'exécution d'une application. De plus, le dispositif informatique peut transmettre, à un composant d'assistant de niveau système configuré pour fournir une interface de niveau système avec le dispositif informatique, des instructions pour être en interface avec un composant actionnable de l'application. Les instructions peuvent être transmises à l'aide d'un composant intermédiaire de confiance configuré pour faciliter une interface entre le composant d'assistant de niveau système et le composant d'assistant de niveau application. En outre, le dispositif informatique peut amener, à l'aide du composant d'assistant de niveau système, le composant actionnable de l'application à effectuer l'action.</description><language>eng ; fre</language><subject>ACOUSTICS ; CALCULATING ; COMPUTING ; COUNTING ; ELECTRIC DIGITAL DATA PROCESSING ; MUSICAL INSTRUMENTS ; PHYSICS ; SPEECH ANALYSIS OR SYNTHESIS ; SPEECH OR AUDIO CODING OR DECODING ; SPEECH OR VOICE PROCESSING ; SPEECH RECOGNITION</subject><creationdate>2023</creationdate><oa>free_for_read</oa><woscitedreferencessubscribed>false</woscitedreferencessubscribed></display><links><openurl>$$Topenurl_article</openurl><openurlfulltext>$$Topenurlfull_article</openurlfulltext><thumbnail>$$Tsyndetics_thumb_exl</thumbnail><linktohtml>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&date=20231207&DB=EPODOC&CC=WO&NR=2023234931A1$$EHTML$$P50$$Gepo$$Hfree_for_read</linktohtml><link.rule.ids>230,308,780,885,25564,76547</link.rule.ids><linktorsrc>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&date=20231207&DB=EPODOC&CC=WO&NR=2023234931A1$$EView_record_in_European_Patent_Office$$FView_record_in_$$GEuropean_Patent_Office$$Hfree_for_read</linktorsrc></links><search><creatorcontrib>YIM, Keun Soo</creatorcontrib><creatorcontrib>FIRMAN, Ilya</creatorcontrib><creatorcontrib>TAUBMAN, Gabriel Oak</creatorcontrib><creatorcontrib>COIMBRA, Adam Miller</creatorcontrib><creatorcontrib>OH, Michael</creatorcontrib><creatorcontrib>GANOV, Svetoslav Radoslavov</creatorcontrib><creatorcontrib>ANDREICA, Mugurel-Ionut</creatorcontrib><creatorcontrib>REUTOV, Mikhail</creatorcontrib><creatorcontrib>DESINENI, Kalyana Ram</creatorcontrib><creatorcontrib>BERRY, Robert James</creatorcontrib><creatorcontrib>KUANG, Cliff Shan</creatorcontrib><title>HUMAN-IN-THE-LOOP VOICE AUTOMATION SYSTEM</title><description>The present disclosure is directed to automating user interactions in an application. In particular, the computing device can determine, based on the input data, an intent associated with performing an action on the computing device. Additionally, the computing device can invoke, using an application-level assistant component configured to provide an application-level interface on the computing device, execution of an application. Moreover, the computing device can transmit, to a system-level assistant component configured to provide a system-level interface with the computing device, instructions to interface with an actionable component of the application. The instructions can be transmitted using a trusted intermediary component configured to facilitate an interface between the system-level assistant component and the application-level assistant component. Furthermore, the computing device can engage, using the system-level assistant component, the actionable component of the application to perform the action.
La présente divulgation concerne l'automatisation d'interactions d'utilisateur dans une application. En particulier, le dispositif informatique peut déterminer, sur la base des données d'entrée, une intention associée à la réalisation d'une action sur le dispositif informatique. De plus, le dispositif informatique peut appeler, à l'aide d'un composant d'assistant de niveau application configuré pour fournir une interface de niveau application sur le dispositif informatique, l'exécution d'une application. De plus, le dispositif informatique peut transmettre, à un composant d'assistant de niveau système configuré pour fournir une interface de niveau système avec le dispositif informatique, des instructions pour être en interface avec un composant actionnable de l'application. Les instructions peuvent être transmises à l'aide d'un composant intermédiaire de confiance configuré pour faciliter une interface entre le composant d'assistant de niveau système et le composant d'assistant de niveau application. En outre, le dispositif informatique peut amener, à l'aide du composant d'assistant de niveau système, le composant actionnable de l'application à effectuer l'action.</description><subject>ACOUSTICS</subject><subject>CALCULATING</subject><subject>COMPUTING</subject><subject>COUNTING</subject><subject>ELECTRIC DIGITAL DATA PROCESSING</subject><subject>MUSICAL INSTRUMENTS</subject><subject>PHYSICS</subject><subject>SPEECH ANALYSIS OR SYNTHESIS</subject><subject>SPEECH OR AUDIO CODING OR DECODING</subject><subject>SPEECH OR VOICE PROCESSING</subject><subject>SPEECH RECOGNITION</subject><fulltext>true</fulltext><rsrctype>patent</rsrctype><creationdate>2023</creationdate><recordtype>patent</recordtype><sourceid>EVB</sourceid><recordid>eNrjZND0CPV19NP19NMN8XDV9fH3D1AI8_d0dlVwDA3x93UM8fT3UwiODA5x9eVhYE1LzClO5YXS3AzKbq4hzh66qQX58anFBYnJqXmpJfHh_kYGRsZGxiaWxoaOhsbEqQIAyYklaA</recordid><startdate>20231207</startdate><enddate>20231207</enddate><creator>YIM, Keun Soo</creator><creator>FIRMAN, Ilya</creator><creator>TAUBMAN, Gabriel Oak</creator><creator>COIMBRA, Adam Miller</creator><creator>OH, Michael</creator><creator>GANOV, Svetoslav Radoslavov</creator><creator>ANDREICA, Mugurel-Ionut</creator><creator>REUTOV, Mikhail</creator><creator>DESINENI, Kalyana Ram</creator><creator>BERRY, Robert James</creator><creator>KUANG, Cliff Shan</creator><scope>EVB</scope></search><sort><creationdate>20231207</creationdate><title>HUMAN-IN-THE-LOOP VOICE AUTOMATION SYSTEM</title><author>YIM, Keun Soo ; FIRMAN, Ilya ; TAUBMAN, Gabriel Oak ; COIMBRA, Adam Miller ; OH, Michael ; GANOV, Svetoslav Radoslavov ; ANDREICA, Mugurel-Ionut ; REUTOV, Mikhail ; DESINENI, Kalyana Ram ; BERRY, Robert James ; KUANG, Cliff Shan</author></sort><facets><frbrtype>5</frbrtype><frbrgroupid>cdi_FETCH-epo_espacenet_WO2023234931A13</frbrgroupid><rsrctype>patents</rsrctype><prefilter>patents</prefilter><language>eng ; fre</language><creationdate>2023</creationdate><topic>ACOUSTICS</topic><topic>CALCULATING</topic><topic>COMPUTING</topic><topic>COUNTING</topic><topic>ELECTRIC DIGITAL DATA PROCESSING</topic><topic>MUSICAL INSTRUMENTS</topic><topic>PHYSICS</topic><topic>SPEECH ANALYSIS OR SYNTHESIS</topic><topic>SPEECH OR AUDIO CODING OR DECODING</topic><topic>SPEECH OR VOICE PROCESSING</topic><topic>SPEECH RECOGNITION</topic><toplevel>online_resources</toplevel><creatorcontrib>YIM, Keun Soo</creatorcontrib><creatorcontrib>FIRMAN, Ilya</creatorcontrib><creatorcontrib>TAUBMAN, Gabriel Oak</creatorcontrib><creatorcontrib>COIMBRA, Adam Miller</creatorcontrib><creatorcontrib>OH, Michael</creatorcontrib><creatorcontrib>GANOV, Svetoslav Radoslavov</creatorcontrib><creatorcontrib>ANDREICA, Mugurel-Ionut</creatorcontrib><creatorcontrib>REUTOV, Mikhail</creatorcontrib><creatorcontrib>DESINENI, Kalyana Ram</creatorcontrib><creatorcontrib>BERRY, Robert James</creatorcontrib><creatorcontrib>KUANG, Cliff Shan</creatorcontrib><collection>esp@cenet</collection></facets><delivery><delcategory>Remote Search Resource</delcategory><fulltext>fulltext_linktorsrc</fulltext></delivery><addata><au>YIM, Keun Soo</au><au>FIRMAN, Ilya</au><au>TAUBMAN, Gabriel Oak</au><au>COIMBRA, Adam Miller</au><au>OH, Michael</au><au>GANOV, Svetoslav Radoslavov</au><au>ANDREICA, Mugurel-Ionut</au><au>REUTOV, Mikhail</au><au>DESINENI, Kalyana Ram</au><au>BERRY, Robert James</au><au>KUANG, Cliff Shan</au><format>patent</format><genre>patent</genre><ristype>GEN</ristype><title>HUMAN-IN-THE-LOOP VOICE AUTOMATION SYSTEM</title><date>2023-12-07</date><risdate>2023</risdate><abstract>The present disclosure is directed to automating user interactions in an application. In particular, the computing device can determine, based on the input data, an intent associated with performing an action on the computing device. Additionally, the computing device can invoke, using an application-level assistant component configured to provide an application-level interface on the computing device, execution of an application. Moreover, the computing device can transmit, to a system-level assistant component configured to provide a system-level interface with the computing device, instructions to interface with an actionable component of the application. The instructions can be transmitted using a trusted intermediary component configured to facilitate an interface between the system-level assistant component and the application-level assistant component. Furthermore, the computing device can engage, using the system-level assistant component, the actionable component of the application to perform the action.
La présente divulgation concerne l'automatisation d'interactions d'utilisateur dans une application. En particulier, le dispositif informatique peut déterminer, sur la base des données d'entrée, une intention associée à la réalisation d'une action sur le dispositif informatique. De plus, le dispositif informatique peut appeler, à l'aide d'un composant d'assistant de niveau application configuré pour fournir une interface de niveau application sur le dispositif informatique, l'exécution d'une application. De plus, le dispositif informatique peut transmettre, à un composant d'assistant de niveau système configuré pour fournir une interface de niveau système avec le dispositif informatique, des instructions pour être en interface avec un composant actionnable de l'application. Les instructions peuvent être transmises à l'aide d'un composant intermédiaire de confiance configuré pour faciliter une interface entre le composant d'assistant de niveau système et le composant d'assistant de niveau application. En outre, le dispositif informatique peut amener, à l'aide du composant d'assistant de niveau système, le composant actionnable de l'application à effectuer l'action.</abstract><oa>free_for_read</oa></addata></record> |
| fulltext | fulltext_linktorsrc |
| identifier | |
| ispartof | |
| issn | |
| language | eng ; fre |
| recordid | cdi_epo_espacenet_WO2023234931A1 |
| source | esp@cenet |
| subjects | ACOUSTICS CALCULATING COMPUTING COUNTING ELECTRIC DIGITAL DATA PROCESSING MUSICAL INSTRUMENTS PHYSICS SPEECH ANALYSIS OR SYNTHESIS SPEECH OR AUDIO CODING OR DECODING SPEECH OR VOICE PROCESSING SPEECH RECOGNITION |
| title | HUMAN-IN-THE-LOOP VOICE AUTOMATION SYSTEM |
| url | https://sfx.bib-bvb.de/sfx_tum?ctx_ver=Z39.88-2004&ctx_enc=info:ofi/enc:UTF-8&ctx_tim=2024-12-30T22%3A47%3A23IST&url_ver=Z39.88-2004&url_ctx_fmt=infofi/fmt:kev:mtx:ctx&rfr_id=info:sid/primo.exlibrisgroup.com:primo3-Article-epo_EVB&rft_val_fmt=info:ofi/fmt:kev:mtx:patent&rft.genre=patent&rft.au=YIM,%20Keun%20Soo&rft.date=2023-12-07&rft_id=info:doi/&rft_dat=%3Cepo_EVB%3EWO2023234931A1%3C/epo_EVB%3E%3Curl%3E%3C/url%3E&disable_directlink=true&sfx.directlink=off&sfx.report_link=0&rft_id=info:oai/&rft_id=info:pmid/&rfr_iscdi=true |