가상 및 그래픽 엘리먼트들을 애니메이팅하고 제어하기 위한 손 제스처

카메라 시스템을 사용하여 비디오 데이터의 프레임들을 캡처하고 있는 아이웨어 디바이스에 의해 검출된 손 제스처들에 응답하여 디스플레이 상의 하나 이상의 가상 엘리먼트들을 제어하기 위한 예시적인 시스템들, 디바이스들, 매체들 및 방법들이 설명된다. 이미지 프로세싱 시스템은 손을 검출하고, 검출된 현재 손 로케이션에 따라 디스플레이 상에 메뉴 아이콘을 제시한다. 이미지 프로세싱 시스템은 캡처된 비디오 데이터의 프레임들에서 일련의 손 모양들을 검출하며, 검출된 손 모양들이 손 제스처 라이브러리에 저장된 복수의 미리 정의된 손 제스처들 중 임의의 손 제스처와 매칭되는지 여부를 결정한다. 매칭에 응답하여, 방법은 매칭되는 손 제스처에 따라 액션을 실행하는 단계를 포함한다. 펴는 제스처에 응답하여, 엘리먼트 애니메이션 시스템은 메뉴 아이콘으로부터 멀리 연장되는 경로를 따라 점진적으로 이동하는 하나 이상의 그래픽 엘리먼트들을 제시한다. 손을 쥐는 제스처는 엘리먼트들이 메뉴 아이콘을 향하는 경로를 따라 후퇴하게 한다. Example systems, devices, media, and methods are described for controlling one or more virtual elements on a display in response to hand gestures detected by an eyewear device that is capturing frames of video data with its camera system. An image processing system detects a hand and presents a menu icon on the display in accordance with a detected current hand location. The image processing system detects a series of hand shapes in the captured frames of video data and determines whether the detected hand shapes match any of a plurality of predefined hand gestures stored in a hand gesture library. In response to a match, the method includes executing an action in accordance with the matching hand gesture. In response to an opening gesture, an element animation system presents one or more graphical elements incrementally moving along a path extending away from the menu icon. A closing hand gesture causes the elements to retreat along the path toward the menu icon.