System and method for measuring emotion state score of user to interaction partner based on face-recognition
실시예들은 제1 사용자의 제1 전자 장치에서 복수의 다른 사용자를 제1 유형의 상호작용 상대방, 제2 유형의 상호작용 상대방 및 제 3 유형의 상호작용 상대방 각각으로 지정하는 단계; 상기 제1 전자 장치에서 전기 통신을 통해 제2 사용자와 상호작용 활동을 개시하는 단계; 상호작용 활동 동안 제1 전자 장치에서 제1 사용자의 이미지, 음성, 텍스트 중 하나 이상의 데이터를 포함한 활동 데이터를 포착하는 단계; 미리 학습된 감정 인식 모델을 이용하여 상기 활동 데이터로부터 제2 사용자에 대한 제1 사용자의 감정 상태 점수를 산출하고,...
Gespeichert in:
| 1. Verfasser: | |
|---|---|
| Format: | Patent |
| Sprache: | eng ; kor |
| Schlagworte: | |
| Online-Zugang: | Volltext bestellen |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
| container_end_page | |
|---|---|
| container_issue | |
| container_start_page | |
| container_title | |
| container_volume | |
| creator | LIM SE RA |
| description | 실시예들은 제1 사용자의 제1 전자 장치에서 복수의 다른 사용자를 제1 유형의 상호작용 상대방, 제2 유형의 상호작용 상대방 및 제 3 유형의 상호작용 상대방 각각으로 지정하는 단계; 상기 제1 전자 장치에서 전기 통신을 통해 제2 사용자와 상호작용 활동을 개시하는 단계; 상호작용 활동 동안 제1 전자 장치에서 제1 사용자의 이미지, 음성, 텍스트 중 하나 이상의 데이터를 포함한 활동 데이터를 포착하는 단계; 미리 학습된 감정 인식 모델을 이용하여 상기 활동 데이터로부터 제2 사용자에 대한 제1 사용자의 감정 상태 점수를 산출하고, 산출된 감정 상태 점수에 기초하여 상기 제2 사용자에 대한 제1 사용자의 관계 감정 지수를 측정하는 단계;를 포함하는, 상호작용 상대방에 대한 사용자의 관계 감정 지수를 측정하는 시스템 및 방법에 관련된다.
Embodiments relate to a system and method for measuring a user's relationship emotional index with respect to an interaction partner, the method comprising the steps of: designating a plurality of different users as a first type of interaction partner, a second type of interaction partner, and a third type of interaction partner, respectively, in a first electronic device of a first user; initiating an interaction activity with a second user via electrical communication in the first electronic device; capturing activity data including one or more of image, voice, and text data of the first user in the first electronic device during the interaction activity; calculating an emotional state score of the first user with respect to the second user from the activity data using a pre-learned emotion recognition model, and measuring a relationship emotional index of the first user with respect to the second user on the basis of the calculated emotional state score. The present invention is a technology with support from the 2022 Metaverse Content Global Project Support Project (D0131-22-1002) of the National IT Industry Promotion Agency "Task Name: Strengthening Overseas Expansion Capacity Based on the Education Metaverse Platform". |
| format | Patent |
| fullrecord | <record><control><sourceid>epo_EVB</sourceid><recordid>TN_cdi_epo_espacenet_KR20240016815A</recordid><sourceformat>XML</sourceformat><sourcesystem>PC</sourcesystem><sourcerecordid>KR20240016815A</sourcerecordid><originalsourceid>FETCH-epo_espacenet_KR20240016815A3</originalsourceid><addsrcrecordid>eNqNyrsKwkAQheE0FqK-w4B1IIkXbEUUwU7tw7iZjQvJTpiZFL69q_gAVufw802z7vZSox4wNtCTPbkBz5Iu6ightkA9W-AIamgE6lgI2MOoJGAMIRoJui8ZUCym_EClBlLw6CgXctzG8BHzbOKxU1r8dpYtT8f74ZzTwDXpkHgkqy_XqqjWRVFud-Vmv_pPvQFClULY</addsrcrecordid><sourcetype>Open Access Repository</sourcetype><iscdi>true</iscdi><recordtype>patent</recordtype></control><display><type>patent</type><title>System and method for measuring emotion state score of user to interaction partner based on face-recognition</title><source>esp@cenet</source><creator>LIM SE RA</creator><creatorcontrib>LIM SE RA</creatorcontrib><description>실시예들은 제1 사용자의 제1 전자 장치에서 복수의 다른 사용자를 제1 유형의 상호작용 상대방, 제2 유형의 상호작용 상대방 및 제 3 유형의 상호작용 상대방 각각으로 지정하는 단계; 상기 제1 전자 장치에서 전기 통신을 통해 제2 사용자와 상호작용 활동을 개시하는 단계; 상호작용 활동 동안 제1 전자 장치에서 제1 사용자의 이미지, 음성, 텍스트 중 하나 이상의 데이터를 포함한 활동 데이터를 포착하는 단계; 미리 학습된 감정 인식 모델을 이용하여 상기 활동 데이터로부터 제2 사용자에 대한 제1 사용자의 감정 상태 점수를 산출하고, 산출된 감정 상태 점수에 기초하여 상기 제2 사용자에 대한 제1 사용자의 관계 감정 지수를 측정하는 단계;를 포함하는, 상호작용 상대방에 대한 사용자의 관계 감정 지수를 측정하는 시스템 및 방법에 관련된다.
Embodiments relate to a system and method for measuring a user's relationship emotional index with respect to an interaction partner, the method comprising the steps of: designating a plurality of different users as a first type of interaction partner, a second type of interaction partner, and a third type of interaction partner, respectively, in a first electronic device of a first user; initiating an interaction activity with a second user via electrical communication in the first electronic device; capturing activity data including one or more of image, voice, and text data of the first user in the first electronic device during the interaction activity; calculating an emotional state score of the first user with respect to the second user from the activity data using a pre-learned emotion recognition model, and measuring a relationship emotional index of the first user with respect to the second user on the basis of the calculated emotional state score. The present invention is a technology with support from the 2022 Metaverse Content Global Project Support Project (D0131-22-1002) of the National IT Industry Promotion Agency "Task Name: Strengthening Overseas Expansion Capacity Based on the Education Metaverse Platform".</description><language>eng ; kor</language><subject>ACOUSTICS ; CALCULATING ; COMPUTING ; COUNTING ; DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FORADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORYOR FORECASTING PURPOSES ; ELECTRIC DIGITAL DATA PROCESSING ; MUSICAL INSTRUMENTS ; PHYSICS ; SPEECH ANALYSIS OR SYNTHESIS ; SPEECH OR AUDIO CODING OR DECODING ; SPEECH OR VOICE PROCESSING ; SPEECH RECOGNITION ; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE,COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTINGPURPOSES, NOT OTHERWISE PROVIDED FOR</subject><creationdate>2024</creationdate><oa>free_for_read</oa><woscitedreferencessubscribed>false</woscitedreferencessubscribed></display><links><openurl>$$Topenurl_article</openurl><openurlfulltext>$$Topenurlfull_article</openurlfulltext><thumbnail>$$Tsyndetics_thumb_exl</thumbnail><linktohtml>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&date=20240206&DB=EPODOC&CC=KR&NR=20240016815A$$EHTML$$P50$$Gepo$$Hfree_for_read</linktohtml><link.rule.ids>230,308,780,885,25564,76547</link.rule.ids><linktorsrc>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&date=20240206&DB=EPODOC&CC=KR&NR=20240016815A$$EView_record_in_European_Patent_Office$$FView_record_in_$$GEuropean_Patent_Office$$Hfree_for_read</linktorsrc></links><search><creatorcontrib>LIM SE RA</creatorcontrib><title>System and method for measuring emotion state score of user to interaction partner based on face-recognition</title><description>실시예들은 제1 사용자의 제1 전자 장치에서 복수의 다른 사용자를 제1 유형의 상호작용 상대방, 제2 유형의 상호작용 상대방 및 제 3 유형의 상호작용 상대방 각각으로 지정하는 단계; 상기 제1 전자 장치에서 전기 통신을 통해 제2 사용자와 상호작용 활동을 개시하는 단계; 상호작용 활동 동안 제1 전자 장치에서 제1 사용자의 이미지, 음성, 텍스트 중 하나 이상의 데이터를 포함한 활동 데이터를 포착하는 단계; 미리 학습된 감정 인식 모델을 이용하여 상기 활동 데이터로부터 제2 사용자에 대한 제1 사용자의 감정 상태 점수를 산출하고, 산출된 감정 상태 점수에 기초하여 상기 제2 사용자에 대한 제1 사용자의 관계 감정 지수를 측정하는 단계;를 포함하는, 상호작용 상대방에 대한 사용자의 관계 감정 지수를 측정하는 시스템 및 방법에 관련된다.
Embodiments relate to a system and method for measuring a user's relationship emotional index with respect to an interaction partner, the method comprising the steps of: designating a plurality of different users as a first type of interaction partner, a second type of interaction partner, and a third type of interaction partner, respectively, in a first electronic device of a first user; initiating an interaction activity with a second user via electrical communication in the first electronic device; capturing activity data including one or more of image, voice, and text data of the first user in the first electronic device during the interaction activity; calculating an emotional state score of the first user with respect to the second user from the activity data using a pre-learned emotion recognition model, and measuring a relationship emotional index of the first user with respect to the second user on the basis of the calculated emotional state score. The present invention is a technology with support from the 2022 Metaverse Content Global Project Support Project (D0131-22-1002) of the National IT Industry Promotion Agency "Task Name: Strengthening Overseas Expansion Capacity Based on the Education Metaverse Platform".</description><subject>ACOUSTICS</subject><subject>CALCULATING</subject><subject>COMPUTING</subject><subject>COUNTING</subject><subject>DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FORADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORYOR FORECASTING PURPOSES</subject><subject>ELECTRIC DIGITAL DATA PROCESSING</subject><subject>MUSICAL INSTRUMENTS</subject><subject>PHYSICS</subject><subject>SPEECH ANALYSIS OR SYNTHESIS</subject><subject>SPEECH OR AUDIO CODING OR DECODING</subject><subject>SPEECH OR VOICE PROCESSING</subject><subject>SPEECH RECOGNITION</subject><subject>SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE,COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTINGPURPOSES, NOT OTHERWISE PROVIDED FOR</subject><fulltext>true</fulltext><rsrctype>patent</rsrctype><creationdate>2024</creationdate><recordtype>patent</recordtype><sourceid>EVB</sourceid><recordid>eNqNyrsKwkAQheE0FqK-w4B1IIkXbEUUwU7tw7iZjQvJTpiZFL69q_gAVufw802z7vZSox4wNtCTPbkBz5Iu6ightkA9W-AIamgE6lgI2MOoJGAMIRoJui8ZUCym_EClBlLw6CgXctzG8BHzbOKxU1r8dpYtT8f74ZzTwDXpkHgkqy_XqqjWRVFud-Vmv_pPvQFClULY</recordid><startdate>20240206</startdate><enddate>20240206</enddate><creator>LIM SE RA</creator><scope>EVB</scope></search><sort><creationdate>20240206</creationdate><title>System and method for measuring emotion state score of user to interaction partner based on face-recognition</title><author>LIM SE RA</author></sort><facets><frbrtype>5</frbrtype><frbrgroupid>cdi_FETCH-epo_espacenet_KR20240016815A3</frbrgroupid><rsrctype>patents</rsrctype><prefilter>patents</prefilter><language>eng ; kor</language><creationdate>2024</creationdate><topic>ACOUSTICS</topic><topic>CALCULATING</topic><topic>COMPUTING</topic><topic>COUNTING</topic><topic>DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FORADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORYOR FORECASTING PURPOSES</topic><topic>ELECTRIC DIGITAL DATA PROCESSING</topic><topic>MUSICAL INSTRUMENTS</topic><topic>PHYSICS</topic><topic>SPEECH ANALYSIS OR SYNTHESIS</topic><topic>SPEECH OR AUDIO CODING OR DECODING</topic><topic>SPEECH OR VOICE PROCESSING</topic><topic>SPEECH RECOGNITION</topic><topic>SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE,COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTINGPURPOSES, NOT OTHERWISE PROVIDED FOR</topic><toplevel>online_resources</toplevel><creatorcontrib>LIM SE RA</creatorcontrib><collection>esp@cenet</collection></facets><delivery><delcategory>Remote Search Resource</delcategory><fulltext>fulltext_linktorsrc</fulltext></delivery><addata><au>LIM SE RA</au><format>patent</format><genre>patent</genre><ristype>GEN</ristype><title>System and method for measuring emotion state score of user to interaction partner based on face-recognition</title><date>2024-02-06</date><risdate>2024</risdate><abstract>실시예들은 제1 사용자의 제1 전자 장치에서 복수의 다른 사용자를 제1 유형의 상호작용 상대방, 제2 유형의 상호작용 상대방 및 제 3 유형의 상호작용 상대방 각각으로 지정하는 단계; 상기 제1 전자 장치에서 전기 통신을 통해 제2 사용자와 상호작용 활동을 개시하는 단계; 상호작용 활동 동안 제1 전자 장치에서 제1 사용자의 이미지, 음성, 텍스트 중 하나 이상의 데이터를 포함한 활동 데이터를 포착하는 단계; 미리 학습된 감정 인식 모델을 이용하여 상기 활동 데이터로부터 제2 사용자에 대한 제1 사용자의 감정 상태 점수를 산출하고, 산출된 감정 상태 점수에 기초하여 상기 제2 사용자에 대한 제1 사용자의 관계 감정 지수를 측정하는 단계;를 포함하는, 상호작용 상대방에 대한 사용자의 관계 감정 지수를 측정하는 시스템 및 방법에 관련된다.
Embodiments relate to a system and method for measuring a user's relationship emotional index with respect to an interaction partner, the method comprising the steps of: designating a plurality of different users as a first type of interaction partner, a second type of interaction partner, and a third type of interaction partner, respectively, in a first electronic device of a first user; initiating an interaction activity with a second user via electrical communication in the first electronic device; capturing activity data including one or more of image, voice, and text data of the first user in the first electronic device during the interaction activity; calculating an emotional state score of the first user with respect to the second user from the activity data using a pre-learned emotion recognition model, and measuring a relationship emotional index of the first user with respect to the second user on the basis of the calculated emotional state score. The present invention is a technology with support from the 2022 Metaverse Content Global Project Support Project (D0131-22-1002) of the National IT Industry Promotion Agency "Task Name: Strengthening Overseas Expansion Capacity Based on the Education Metaverse Platform".</abstract><oa>free_for_read</oa></addata></record> |
| fulltext | fulltext_linktorsrc |
| identifier | |
| ispartof | |
| issn | |
| language | eng ; kor |
| recordid | cdi_epo_espacenet_KR20240016815A |
| source | esp@cenet |
| subjects | ACOUSTICS CALCULATING COMPUTING COUNTING DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FORADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORYOR FORECASTING PURPOSES ELECTRIC DIGITAL DATA PROCESSING MUSICAL INSTRUMENTS PHYSICS SPEECH ANALYSIS OR SYNTHESIS SPEECH OR AUDIO CODING OR DECODING SPEECH OR VOICE PROCESSING SPEECH RECOGNITION SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE,COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTINGPURPOSES, NOT OTHERWISE PROVIDED FOR |
| title | System and method for measuring emotion state score of user to interaction partner based on face-recognition |
| url | https://sfx.bib-bvb.de/sfx_tum?ctx_ver=Z39.88-2004&ctx_enc=info:ofi/enc:UTF-8&ctx_tim=2024-12-25T19%3A51%3A13IST&url_ver=Z39.88-2004&url_ctx_fmt=infofi/fmt:kev:mtx:ctx&rfr_id=info:sid/primo.exlibrisgroup.com:primo3-Article-epo_EVB&rft_val_fmt=info:ofi/fmt:kev:mtx:patent&rft.genre=patent&rft.au=LIM%20SE%20RA&rft.date=2024-02-06&rft_id=info:doi/&rft_dat=%3Cepo_EVB%3EKR20240016815A%3C/epo_EVB%3E%3Curl%3E%3C/url%3E&disable_directlink=true&sfx.directlink=off&sfx.report_link=0&rft_id=info:oai/&rft_id=info:pmid/&rfr_iscdi=true |