METHOD AND SYSTME FOR COMPOSING IMAGE FOR GENERATING VIRTUAL FITTING IMAGE

An objective of the present invention is to provide an image synthesis method and system for creating a virtual fitting images that can provide a fitting image for a user by synthesizing a three-dimensional wearing image using only a user′s 2D full body picture and a 2D product picture. The method i...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: KHO, SUNG PIL, KIM, JUN YEONG, KIM, EUI CHAN, KIM, YUN SEONG
Format: Patent
Sprache:eng ; kor
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:An objective of the present invention is to provide an image synthesis method and system for creating a virtual fitting images that can provide a fitting image for a user by synthesizing a three-dimensional wearing image using only a user′s 2D full body picture and a 2D product picture. The method includes: a step of receiving a virtual fitting image generation request based on user full-body and product pictures; a step of extracting user body information from the user full-body picture; a step of extracting product information from the product picture; a step of predicting a wearing region where the product is to be worn in the full-body picture from the body information and the product information using a wearing region prediction deep learning model; a step of warping the product picture in accordance with the product information and the predicted wearing region using a product picture transformation deep learning model; and a step of generating a virtual fitting image by synthesizing the predicted wearing region with the warped product picture using a wearing picture synthesis deep learning model. 가상 피팅 이미지 생성을 위한 이미지 합성 방법 및 시스템이 제공된다. 상기 가상 피팅 이미지 생성을 위한 이미지 합성 방법은 사용자의 전신 사진과 상품 사진을 기반으로 가상 피팅 이미지 생성을 요청받는 단계; 상기 사용자의 전신 사진으로부터 사용자의 신체 정보를 추출하는 단계; 상기 상품 사진으로부터 상품 정보를 추출하는 단계; 착용 영역 예측 딥러닝 모델을 이용하여, 상기 신체 정보 및 상기 상품 정보로부터 상기 전신 사진에서 상품이 착용될 착용 영역을 예측하는 단계; 상품 사진 변형 딥러닝 모델을 이용하여, 상기 상품 정보 및 상기 예측된 착용 영역에 따라 상품 사진을 와핑(warping)하는 단계; 및 착용 사진 합성 딥러닝 모델을 이용하여, 상기 예측된 착용 영역에 상기 와핑된 상품 사진을 합성하여 가상 피팅 이미지를 생성하는 단계를 포함한다.