METHOD AND SYSTEM FOR CLOTHING VIRTUAL TRY-ON SERVICE BASED ON DEEP LEARNING

A deep learning-based clothing virtual wearing method according to an embodiment of the present invention is a method in which a virtual wearing application executed by at least one processor of a computing device performs a deep learning-based clothing virtual wearing process, and includes the steps of: obtaining an input image including a clothes image and a model object to be virtually worn on the clothes image; generating a pose estimation image by detecting a pose of the model object in the obtained input image; changing a standard ROI box into a customized ROI box according to the generated pose estimation image; generating a first ROI box image by extracting a region of the customized ROI box with respect to the input image; generating a second ROI box image by removing a background region in the generated first ROI box image; generating a temporary wearing image by virtually wearing the clothes image on the model object in the generated second ROI box image; and creating a virtual wearing image, which is an image obtained by synthesizing a model object virtually wearing the clothes image and a background area in the input image based on the generated temporary wearing image, the first ROI box image, and the input image. 본 발명의 실시예에 따른 딥러닝 기반의 의류 가상 착용 방법은, 컴퓨팅 디바이스의 적어도 하나의 프로세서에 의하여 실행되는 가상착용 애플리케이션이 딥러닝 기반의 의류 가상 착용 프로세스를 수행하는 방법으로서, 옷 이미지 및 상기 옷 이미지를 가상 착용시키고자 하는 모델 객체를 포함하는 입력 이미지를 획득하는 단계; 상기 획득된 입력 이미지 내 상기 모델 객체의 포즈를 검출하여 포즈 추정 이미지를 생성하는 단계; 표준 ROI 박스를 상기 생성된 포즈 추정 이미지에 따라서 맞춤형 ROI 박스로 변경하는 단계; 상기 입력 이미지에 대해 상기 변경된 맞춤형 ROI 박스의 영역을 추출하여 제 1 ROI 박스 이미지를 생성하는 단계; 상기 생성된 제 1 ROI 박스 이미지 내 배경영역을 제거하여 제 2 ROI 박스 이미지를 생성하는 단계; 상기 생성된 제 2 ROI 박스 이미지 내 상기 모델 객체에 상기 옷 이미지를 가상 착용하여 임시 착용 이미지를 생성하는 단계; 및 상기 생성된 임시 착용 이미지와, 상기 제 1 ROI 박스 이미지와, 상기 입력 이미지에 기초하여, 상기 옷 이미지를 가상 착용한 모델 객체와 상기 입력 이미지 내 배경영역을 합성한 이미지인 가상 착용 이미지를 생성하는 단계를 포함한다.