OCCLUSION PROCESSING FOR FRAME RATE CONVERSION USING DEEP LEARNING
A method for converting a frame rate of an input video is provided. The method includes performing a motion estimation by generating at least one motion field for at least one pair of frames of the input video, wherein the at least one motion field includes a set of motion vectors for each block of...
Gespeichert in:
Hauptverfasser: | , , , |
---|---|
Format: | Patent |
Sprache: | eng ; fre |
Schlagworte: | |
Online-Zugang: | Volltext bestellen |
Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Zusammenfassung: | A method for converting a frame rate of an input video is provided. The method includes performing a motion estimation by generating at least one motion field for at least one pair of frames of the input video, wherein the at least one motion field includes a set of motion vectors for each block of a first reference frame of the input video, the set of motion vectors indicating to a second reference frame of the input video, and preparing first data for a predetermined interpolation phase for each block of an interpolated frame, where the first data include at least one parameter for a pre-trained occlusion processing (OcC) convolutional neural network (CNN), the at least one parameter being obtained based on the at least one motion field.
L'invention concerne un procédé de conversion de fréquence d'images d'une vidéo d'entrée. Le procédé consiste à effectuer une estimation de mouvement par génération d'au moins un champ de mouvement pour au moins une paire d'images de la vidéo d'entrée, le ou les champs de mouvement comprenant un ensemble de vecteurs de mouvement pour chaque bloc d'une première image de référence de la vidéo d'entrée, l'ensemble de vecteurs de mouvement indiquant une seconde image de référence de la vidéo d'entrée, et à préparer des premières données pour une phase d'interpolation prédéterminée pour chaque bloc d'une image interpolée, les premières données comprenant au moins un paramètre pour un réseau de neurones convolutif (CNN) de traitement d'occultation (OcC) pré-entraîné, ledit au moins un paramètre étant obtenu sur la base dudit au moins un champ de mouvement. |
---|