MUSICAL SCORE PERFORMANCE ALIGNMENT FOR AUTOMATED PERFORMANCE EVALUATION

Techniques are described for musical score performance alignment for automated performance evaluation. Embodiments receive performed note data defining pitches and onset times of performed notes as a user performs a musical score, and the musical score is computationally represented by score note da...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: VAN LAARHOVEN, Frits, CHOI, Sunny Sungeun, GRACHTEN, Maarten
Format: Patent
Sprache:eng ; fre
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
container_end_page
container_issue
container_start_page
container_title
container_volume
creator VAN LAARHOVEN, Frits
CHOI, Sunny Sungeun
GRACHTEN, Maarten
description Techniques are described for musical score performance alignment for automated performance evaluation. Embodiments receive performed note data defining pitches and onset times of performed notes as a user performs a musical score, and the musical score is computationally represented by score note data defining pitches and onset times of score notes. The performed notes are automatically aligned to respective score notes by computing a highest likelihood sequence of complex hand states for a sequence of time steps, each corresponding to the onset timing of a respective one of the score notes. Evaluation feedback, including qualitative evaluation feedback, is automatically generated by pattern-matching the note-wise alignment to evaluation models. Several embodiments provide additional features, such as performing automated alignment, evaluation, and feedback while the user is performing the musical score, in context of two-handed performances, etc. Des techniques sont décrites pour un alignement de performance de partition de musique pour une évaluation de performance automatisée. Des modes de réalisation reçoivent des données de notes musicales exécutées définissant des hauteurs et des temps d'attaque de notes exécutées lorsqu'un utilisateur joue une partition de musique, et la partition de musique est représentée informatiquement par des données de notes de partition de musique définissant des hauteurs et des temps d'attaque de notes de partition de musique. Les notes exécutées sont automatiquement alignées sur des notes de partition de musique respectives en calculant une séquence de probabilité la plus élevée d'états de main complexes pour une séquence d'étapes temporelles, chacune correspondant à la synchronisation d'apparition d'une note respective parmi les notes de partition de musique. Une rétroaction d'évaluation, comprenant une rétroaction d'évaluation qualitative, est automatiquement générée par mise en correspondance de modèles d'alignement de notes avec des modèles d'évaluation. Plusieurs modes de réalisation fournissent des caractéristiques supplémentaires, telles que la réalisation d'un alignement, d'une évaluation et d'une rétroaction automatisés pendant que l'utilisateur joue la partition de musique, dans le contexte d'exécution à deux mains, etc.
format Patent
fullrecord <record><control><sourceid>epo_EVB</sourceid><recordid>TN_cdi_epo_espacenet_WO2024107949A1</recordid><sourceformat>XML</sourceformat><sourcesystem>PC</sourcesystem><sourcerecordid>WO2024107949A1</sourcerecordid><originalsourceid>FETCH-epo_espacenet_WO2024107949A13</originalsourceid><addsrcrecordid>eNrjZPDwDQ32dHb0UQh29g9yVQhwDXLzD_J19HN2VXD08XT383X1C1EACik4hob4-zqGuLqgqHENc_QJdQzx9PfjYWBNS8wpTuWF0twMym6uIc4euqkF-fGpxQWJyal5qSXx4f5GBkYmhgbmliaWjobGxKkCANyjLhs</addsrcrecordid><sourcetype>Open Access Repository</sourcetype><iscdi>true</iscdi><recordtype>patent</recordtype></control><display><type>patent</type><title>MUSICAL SCORE PERFORMANCE ALIGNMENT FOR AUTOMATED PERFORMANCE EVALUATION</title><source>esp@cenet</source><creator>VAN LAARHOVEN, Frits ; CHOI, Sunny Sungeun ; GRACHTEN, Maarten</creator><creatorcontrib>VAN LAARHOVEN, Frits ; CHOI, Sunny Sungeun ; GRACHTEN, Maarten</creatorcontrib><description>Techniques are described for musical score performance alignment for automated performance evaluation. Embodiments receive performed note data defining pitches and onset times of performed notes as a user performs a musical score, and the musical score is computationally represented by score note data defining pitches and onset times of score notes. The performed notes are automatically aligned to respective score notes by computing a highest likelihood sequence of complex hand states for a sequence of time steps, each corresponding to the onset timing of a respective one of the score notes. Evaluation feedback, including qualitative evaluation feedback, is automatically generated by pattern-matching the note-wise alignment to evaluation models. Several embodiments provide additional features, such as performing automated alignment, evaluation, and feedback while the user is performing the musical score, in context of two-handed performances, etc. Des techniques sont décrites pour un alignement de performance de partition de musique pour une évaluation de performance automatisée. Des modes de réalisation reçoivent des données de notes musicales exécutées définissant des hauteurs et des temps d'attaque de notes exécutées lorsqu'un utilisateur joue une partition de musique, et la partition de musique est représentée informatiquement par des données de notes de partition de musique définissant des hauteurs et des temps d'attaque de notes de partition de musique. Les notes exécutées sont automatiquement alignées sur des notes de partition de musique respectives en calculant une séquence de probabilité la plus élevée d'états de main complexes pour une séquence d'étapes temporelles, chacune correspondant à la synchronisation d'apparition d'une note respective parmi les notes de partition de musique. Une rétroaction d'évaluation, comprenant une rétroaction d'évaluation qualitative, est automatiquement générée par mise en correspondance de modèles d'alignement de notes avec des modèles d'évaluation. Plusieurs modes de réalisation fournissent des caractéristiques supplémentaires, telles que la réalisation d'un alignement, d'une évaluation et d'une rétroaction automatisés pendant que l'utilisateur joue la partition de musique, dans le contexte d'exécution à deux mains, etc.</description><language>eng ; fre</language><subject>ACOUSTICS ; ADVERTISING ; AIDS FOR MUSIC ; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND,DEAF OR MUTE ; CRYPTOGRAPHY ; DIAGRAMS ; DISPLAY ; EDUCATION ; EDUCATIONAL OR DEMONSTRATION APPLIANCES ; ELECTROPHONIC MUSICAL INSTRUMENTS ; GLOBES ; MUSICAL INSTRUMENTS ; OTHER AUXILIARY DEVICES OR ACCESSORIES FOR MUSIC OR MUSICALINSTRUMENTS ; PHYSICS ; PLANETARIA ; SEALS ; SUPPORTS FOR MUSICAL INSTRUMENTS</subject><creationdate>2024</creationdate><oa>free_for_read</oa><woscitedreferencessubscribed>false</woscitedreferencessubscribed></display><links><openurl>$$Topenurl_article</openurl><openurlfulltext>$$Topenurlfull_article</openurlfulltext><thumbnail>$$Tsyndetics_thumb_exl</thumbnail><linktohtml>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&amp;date=20240523&amp;DB=EPODOC&amp;CC=WO&amp;NR=2024107949A1$$EHTML$$P50$$Gepo$$Hfree_for_read</linktohtml><link.rule.ids>230,308,777,882,25546,76297</link.rule.ids><linktorsrc>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&amp;date=20240523&amp;DB=EPODOC&amp;CC=WO&amp;NR=2024107949A1$$EView_record_in_European_Patent_Office$$FView_record_in_$$GEuropean_Patent_Office$$Hfree_for_read</linktorsrc></links><search><creatorcontrib>VAN LAARHOVEN, Frits</creatorcontrib><creatorcontrib>CHOI, Sunny Sungeun</creatorcontrib><creatorcontrib>GRACHTEN, Maarten</creatorcontrib><title>MUSICAL SCORE PERFORMANCE ALIGNMENT FOR AUTOMATED PERFORMANCE EVALUATION</title><description>Techniques are described for musical score performance alignment for automated performance evaluation. Embodiments receive performed note data defining pitches and onset times of performed notes as a user performs a musical score, and the musical score is computationally represented by score note data defining pitches and onset times of score notes. The performed notes are automatically aligned to respective score notes by computing a highest likelihood sequence of complex hand states for a sequence of time steps, each corresponding to the onset timing of a respective one of the score notes. Evaluation feedback, including qualitative evaluation feedback, is automatically generated by pattern-matching the note-wise alignment to evaluation models. Several embodiments provide additional features, such as performing automated alignment, evaluation, and feedback while the user is performing the musical score, in context of two-handed performances, etc. Des techniques sont décrites pour un alignement de performance de partition de musique pour une évaluation de performance automatisée. Des modes de réalisation reçoivent des données de notes musicales exécutées définissant des hauteurs et des temps d'attaque de notes exécutées lorsqu'un utilisateur joue une partition de musique, et la partition de musique est représentée informatiquement par des données de notes de partition de musique définissant des hauteurs et des temps d'attaque de notes de partition de musique. Les notes exécutées sont automatiquement alignées sur des notes de partition de musique respectives en calculant une séquence de probabilité la plus élevée d'états de main complexes pour une séquence d'étapes temporelles, chacune correspondant à la synchronisation d'apparition d'une note respective parmi les notes de partition de musique. Une rétroaction d'évaluation, comprenant une rétroaction d'évaluation qualitative, est automatiquement générée par mise en correspondance de modèles d'alignement de notes avec des modèles d'évaluation. Plusieurs modes de réalisation fournissent des caractéristiques supplémentaires, telles que la réalisation d'un alignement, d'une évaluation et d'une rétroaction automatisés pendant que l'utilisateur joue la partition de musique, dans le contexte d'exécution à deux mains, etc.</description><subject>ACOUSTICS</subject><subject>ADVERTISING</subject><subject>AIDS FOR MUSIC</subject><subject>APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND,DEAF OR MUTE</subject><subject>CRYPTOGRAPHY</subject><subject>DIAGRAMS</subject><subject>DISPLAY</subject><subject>EDUCATION</subject><subject>EDUCATIONAL OR DEMONSTRATION APPLIANCES</subject><subject>ELECTROPHONIC MUSICAL INSTRUMENTS</subject><subject>GLOBES</subject><subject>MUSICAL INSTRUMENTS</subject><subject>OTHER AUXILIARY DEVICES OR ACCESSORIES FOR MUSIC OR MUSICALINSTRUMENTS</subject><subject>PHYSICS</subject><subject>PLANETARIA</subject><subject>SEALS</subject><subject>SUPPORTS FOR MUSICAL INSTRUMENTS</subject><fulltext>true</fulltext><rsrctype>patent</rsrctype><creationdate>2024</creationdate><recordtype>patent</recordtype><sourceid>EVB</sourceid><recordid>eNrjZPDwDQ32dHb0UQh29g9yVQhwDXLzD_J19HN2VXD08XT383X1C1EACik4hob4-zqGuLqgqHENc_QJdQzx9PfjYWBNS8wpTuWF0twMym6uIc4euqkF-fGpxQWJyal5qSXx4f5GBkYmhgbmliaWjobGxKkCANyjLhs</recordid><startdate>20240523</startdate><enddate>20240523</enddate><creator>VAN LAARHOVEN, Frits</creator><creator>CHOI, Sunny Sungeun</creator><creator>GRACHTEN, Maarten</creator><scope>EVB</scope></search><sort><creationdate>20240523</creationdate><title>MUSICAL SCORE PERFORMANCE ALIGNMENT FOR AUTOMATED PERFORMANCE EVALUATION</title><author>VAN LAARHOVEN, Frits ; CHOI, Sunny Sungeun ; GRACHTEN, Maarten</author></sort><facets><frbrtype>5</frbrtype><frbrgroupid>cdi_FETCH-epo_espacenet_WO2024107949A13</frbrgroupid><rsrctype>patents</rsrctype><prefilter>patents</prefilter><language>eng ; fre</language><creationdate>2024</creationdate><topic>ACOUSTICS</topic><topic>ADVERTISING</topic><topic>AIDS FOR MUSIC</topic><topic>APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND,DEAF OR MUTE</topic><topic>CRYPTOGRAPHY</topic><topic>DIAGRAMS</topic><topic>DISPLAY</topic><topic>EDUCATION</topic><topic>EDUCATIONAL OR DEMONSTRATION APPLIANCES</topic><topic>ELECTROPHONIC MUSICAL INSTRUMENTS</topic><topic>GLOBES</topic><topic>MUSICAL INSTRUMENTS</topic><topic>OTHER AUXILIARY DEVICES OR ACCESSORIES FOR MUSIC OR MUSICALINSTRUMENTS</topic><topic>PHYSICS</topic><topic>PLANETARIA</topic><topic>SEALS</topic><topic>SUPPORTS FOR MUSICAL INSTRUMENTS</topic><toplevel>online_resources</toplevel><creatorcontrib>VAN LAARHOVEN, Frits</creatorcontrib><creatorcontrib>CHOI, Sunny Sungeun</creatorcontrib><creatorcontrib>GRACHTEN, Maarten</creatorcontrib><collection>esp@cenet</collection></facets><delivery><delcategory>Remote Search Resource</delcategory><fulltext>fulltext_linktorsrc</fulltext></delivery><addata><au>VAN LAARHOVEN, Frits</au><au>CHOI, Sunny Sungeun</au><au>GRACHTEN, Maarten</au><format>patent</format><genre>patent</genre><ristype>GEN</ristype><title>MUSICAL SCORE PERFORMANCE ALIGNMENT FOR AUTOMATED PERFORMANCE EVALUATION</title><date>2024-05-23</date><risdate>2024</risdate><abstract>Techniques are described for musical score performance alignment for automated performance evaluation. Embodiments receive performed note data defining pitches and onset times of performed notes as a user performs a musical score, and the musical score is computationally represented by score note data defining pitches and onset times of score notes. The performed notes are automatically aligned to respective score notes by computing a highest likelihood sequence of complex hand states for a sequence of time steps, each corresponding to the onset timing of a respective one of the score notes. Evaluation feedback, including qualitative evaluation feedback, is automatically generated by pattern-matching the note-wise alignment to evaluation models. Several embodiments provide additional features, such as performing automated alignment, evaluation, and feedback while the user is performing the musical score, in context of two-handed performances, etc. Des techniques sont décrites pour un alignement de performance de partition de musique pour une évaluation de performance automatisée. Des modes de réalisation reçoivent des données de notes musicales exécutées définissant des hauteurs et des temps d'attaque de notes exécutées lorsqu'un utilisateur joue une partition de musique, et la partition de musique est représentée informatiquement par des données de notes de partition de musique définissant des hauteurs et des temps d'attaque de notes de partition de musique. Les notes exécutées sont automatiquement alignées sur des notes de partition de musique respectives en calculant une séquence de probabilité la plus élevée d'états de main complexes pour une séquence d'étapes temporelles, chacune correspondant à la synchronisation d'apparition d'une note respective parmi les notes de partition de musique. Une rétroaction d'évaluation, comprenant une rétroaction d'évaluation qualitative, est automatiquement générée par mise en correspondance de modèles d'alignement de notes avec des modèles d'évaluation. Plusieurs modes de réalisation fournissent des caractéristiques supplémentaires, telles que la réalisation d'un alignement, d'une évaluation et d'une rétroaction automatisés pendant que l'utilisateur joue la partition de musique, dans le contexte d'exécution à deux mains, etc.</abstract><oa>free_for_read</oa></addata></record>
fulltext fulltext_linktorsrc
identifier
ispartof
issn
language eng ; fre
recordid cdi_epo_espacenet_WO2024107949A1
source esp@cenet
subjects ACOUSTICS
ADVERTISING
AIDS FOR MUSIC
APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND,DEAF OR MUTE
CRYPTOGRAPHY
DIAGRAMS
DISPLAY
EDUCATION
EDUCATIONAL OR DEMONSTRATION APPLIANCES
ELECTROPHONIC MUSICAL INSTRUMENTS
GLOBES
MUSICAL INSTRUMENTS
OTHER AUXILIARY DEVICES OR ACCESSORIES FOR MUSIC OR MUSICALINSTRUMENTS
PHYSICS
PLANETARIA
SEALS
SUPPORTS FOR MUSICAL INSTRUMENTS
title MUSICAL SCORE PERFORMANCE ALIGNMENT FOR AUTOMATED PERFORMANCE EVALUATION
url https://sfx.bib-bvb.de/sfx_tum?ctx_ver=Z39.88-2004&ctx_enc=info:ofi/enc:UTF-8&ctx_tim=2025-01-17T10%3A35%3A10IST&url_ver=Z39.88-2004&url_ctx_fmt=infofi/fmt:kev:mtx:ctx&rfr_id=info:sid/primo.exlibrisgroup.com:primo3-Article-epo_EVB&rft_val_fmt=info:ofi/fmt:kev:mtx:patent&rft.genre=patent&rft.au=VAN%20LAARHOVEN,%20Frits&rft.date=2024-05-23&rft_id=info:doi/&rft_dat=%3Cepo_EVB%3EWO2024107949A1%3C/epo_EVB%3E%3Curl%3E%3C/url%3E&disable_directlink=true&sfx.directlink=off&sfx.report_link=0&rft_id=info:oai/&rft_id=info:pmid/&rfr_iscdi=true