METHODS, APPARATUS FOR OBJECT DETECTION AND STABILIZED RENDERING
There is provided systems, methods and devices for object detection and systems methods and devices for stabilize rendering of effects such as a makeup effect applied to a face image. In an embodiment, a face in a face input image is localized using a face tracker comprising one or more deep neural...
Gespeichert in:
Hauptverfasser: | , |
---|---|
Format: | Patent |
Sprache: | eng ; fre |
Schlagworte: | |
Online-Zugang: | Volltext bestellen |
Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Zusammenfassung: | There is provided systems, methods and devices for object detection and systems methods and devices for stabilize rendering of effects such as a makeup effect applied to a face image. In an embodiment, a face in a face input image is localized using a face tracker comprising one or more deep neural networks (DNNs) trained to localize facial features; and a training image is produced comprising the face as localized, the training image comprising either an occluded training image where an occluding object is rendered to the face or a non-occluded training image showing the face without the facemask, the training image produced for occluded face DNN training. In an embodiment, rendering of an effect to a current frame of a video stream is responsive to stabilization of a location of detected features in the stream.
L'invention concerne des systèmes, des procédés et des dispositifs de détection d'objet et des, systèmes, des procédés et des dispositifs de stabilisation de rendu d'effets tels qu'un effet de maquillage appliqué à une image de visage. Dans un mode de réalisation, un visage dans une image d'entrée de visage est localisé à l'aide d'un dispositif de suivi de visage comprenant un ou plusieurs réseaux neuronaux profonds (DNN) entraînés pour localiser des caractéristiques faciales ; et une image d'apprentissage est produite comprenant le visage comme localisé, l'image d'apprentissage comprenant soit une image d'apprentissage occluse dans laquelle un objet d'occlusion est rendu sur le visage ou une image d'apprentissage non occluse montrant le visage sans le masque facial, l'image d'apprentissage étant produite pour un apprentissage DNN de visage occlus. Dans un mode de réalisation, le rendu d'un effet sur une trame actuelle d'un flux vidéo est sensible à la stabilisation d'un emplacement de caractéristiques détectées dans le flux. |
---|