개인화된 3D 헤드 모델 변형을 위한 방법 및 시스템

전자 장치는, 2차원(2D) 얼굴 이미지를 수신하는 단계; 인공 지능(AI) 모델에 기초하여 2D 얼굴 이미지에서 제1 키포인트 세트를 식별하는 단계; 3D 헤드 템플릿 모델에 위치된 사용자 제공 키포인트 주석 세트에 기초하여 3D 헤드 템플릿 모델의 메시의 복수의 정점에 위치된 제2 키포인트 세트에 제1 키포인트 세트를 매핑하는 단계; 제1 키포인트 세트와 상기 제2 키포인트 세트 사이의 차이를 줄임으로써 변형된 3D 헤드 메시 모델을 획득하기 위해 3D 헤드 템플릿 모델의 메시에 대한 변형을 수행하는 단계; 및 2D 얼굴 이미지에 따라 헤드 모델을 획득하기 위해 변형된 3D 헤드 메시 모델에 블렌드셰이프 방법을 적용하는 단계를 포함하는 3차원(3D) 헤드 변형 모델을 생성하는 방법을 수행한다. An electronic apparatus performs a method of generating a three-dimensional (3D) head deformation model that includes: receiving a two-dimensional (2D) facial image; identifying a first set of keypoints in the 2D facial image based on some artificial intelligence (AI) models; mapping the first set of keypoints to a second set of keypoints based on a set of user-provided keypoint annotations located on a plurality of vertices of a mesh of a 3D head template model; performing deformation to the mesh of the 3D head template model to obtain a deformed 3D head mesh model by reducing the differences between the first set of keypoints and the second set of keypoints; and applying a blendshape method to the deformed 3D head mesh model to obtain a personalized head model according to the 2D facial image.