METHOD DEVICE AND SYSTEM FOR EYE TRACKING FOR ANALYZING ABILITY OF ONLINE LEARNING

According to one embodiment, a method of tracking eyes for analyzing an online learning capability, which is executed by an apparatus, includes the following steps of: controlling learning content provided online such that the content is displayed on a screen of a user terminal when a learning start...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
1. Verfasser: KIM, CHANG HWA
Format: Patent
Sprache:eng ; kor
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:According to one embodiment, a method of tracking eyes for analyzing an online learning capability, which is executed by an apparatus, includes the following steps of: controlling learning content provided online such that the content is displayed on a screen of a user terminal when a learning start menu is selected by the user terminal; recognizing left and right eye areas of a user from a facial area of the user acquired through a camera mounted on the user terminal; confirming positions of pupils from the eye areas respectively; calculating a separation distance between the user terminal and the user, based on the sizes of the pupils and the size of each of the eye areas; confirming whether the eyes of the user are located within the screen, based on the positions of the pupils and the separation distance; determining that the eyes of the user are toward one spot in the screen when confirming a pupil standstill time, for which the eyes of the user are stationary, as greater than a preset reference time, in a state in which the eyes of the user are located within the screen; determining that the eyes of the user are toward a first spot within the screen, based on the positions of the pupils and the separation distance; confirming whether the first spot is located in a first area displaying a lecture image of the learning content; and controlling the lecture image such that the reproduction of the lecture image is maintained, when confirming the first spot as located in the first area. Therefore, the present invention is capable of providing customized education to a user. 일실시에에 따르면, 장치에 의해 수행되는, 온라인 학습 능력을 분석하기 위해 시선을 추적하는 방법에 있어서, 사용자 단말에서 학습 시작 메뉴가 선택되면, 온라인 상으로 제공되는 학습 콘텐츠가 상기 사용자 단말의 화면에 표시되도록 제어하는 단계; 상기 사용자 단말에 장착된 카메라를 통해 획득된 사용자의 얼굴 영상에서 상기 사용자의 좌측 및 우측 눈 영역을 인식하는 단계; 상기 눈 영역 각각에서 눈동자들의 위치를 확인하는 단계; 상기 눈 영역 각각의 크기 및 상기 눈동자들의 크기를 기반으로, 상기 사용자와 상기 사용자 단말 간의 이격 거리를 산출하는 단계; 상기 눈동자들의 위치 및 상기 이격 거리에 기초하여, 상기 사용자의 시선이 상기 화면 내에 위치하는지 여부를 확인하는 단계; 상기 사용자의 시선이 상기 화면 내에 위치하고 있는 상태에서, 상기 사용자의 시선이 고정되어 이동하지 않는 눈동자 체류 시간이 미리 설정된 기준 시간 보다 큰 것으로 확인되면, 상기 사용자의 시선이 상기 화면 내에서 어느 지점을 주시하고 있는 것으로 판정하는 단계; 상기 눈동자들의 위치 및 상기 이격 거리에 기초하여, 상기 사용자의 시선이 상기 화면 내에서 제1 지점을 주시하고 있는 것으로 판단하는 단계; 상기 학습 콘텐츠의 강의 영상이 표시되는 제1 영역에 상기 제1 지점이 위치하는지 여부를 확인하는 단계; 및 상기 제1 영역에 상기 제1 지점이 위치하는 것으로 확인되면, 상기 강의 영상의 재생이 유지되도록 제어하는 단계를 포함하는, 온라인 학습 능력 분석을 위한 시선 추적 방법이 제공된다.