Estimación de movimiento en secuencias de imágenes RGB y RGB-D

El movimiento es una característica fundamental para el procesamientode video y sus posteriores aplicaciones. La estimación de movimientoen video es de gran utilidad para definir la correspondencia depuntos en una escena, calcular sus velocidades y así poder discriminar objetos,acciones, segmentar m...

Descripción completa

Guardado en:
Detalles Bibliográficos
Autor principal: Gómez Fernández, Francisco Roberto
Otros Autores: Mejail, Marta
Formato: Tesis doctoral publishedVersion
Lenguaje:Inglés
Publicado: Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales 2016
Materias:
Acceso en línea:https://hdl.handle.net/20.500.12110/tesis_n5985_GomezFernandez
https://repositoriouba.sisbi.uba.ar/gsdl/cgi-bin/library.cgi?a=d&c=aextesis&d=tesis_n5985_GomezFernandez_oai
Aporte de:
id I28-R145-tesis_n5985_GomezFernandez_oai
record_format dspace
institution Universidad de Buenos Aires
institution_str I-28
repository_str R-145
collection Repositorio Digital de la Universidad de Buenos Aires (UBA)
language Inglés
orig_language_str_mv eng
topic ESTIMACION DE MOVIMIENTO
TEXTURAS DINAMICAS
OPTICAL FLOW
SCENE FLOW
GRAPH CUTS
MOTION ESTIMATION
DYNAMIC TEXTURES
OPTICAL FLOW
SCENE FLOW
GRAPH CUTS
spellingShingle ESTIMACION DE MOVIMIENTO
TEXTURAS DINAMICAS
OPTICAL FLOW
SCENE FLOW
GRAPH CUTS
MOTION ESTIMATION
DYNAMIC TEXTURES
OPTICAL FLOW
SCENE FLOW
GRAPH CUTS
Gómez Fernández, Francisco Roberto
Estimación de movimiento en secuencias de imágenes RGB y RGB-D
topic_facet ESTIMACION DE MOVIMIENTO
TEXTURAS DINAMICAS
OPTICAL FLOW
SCENE FLOW
GRAPH CUTS
MOTION ESTIMATION
DYNAMIC TEXTURES
OPTICAL FLOW
SCENE FLOW
GRAPH CUTS
description El movimiento es una característica fundamental para el procesamientode video y sus posteriores aplicaciones. La estimación de movimientoen video es de gran utilidad para definir la correspondencia depuntos en una escena, calcular sus velocidades y así poder discriminar objetos,acciones, segmentar movimiento, etc. El objetivo de este trabajo es realizar un seguimiento preciso y una estimación de movimiento de un gran conjunto de puntos. Esto se conoce comoestimación densa de movimiento. Para ello, se proponen dos líneas principales de estudio: modelos estadísticos de movimiento utilizando texturas dinámicas y el cálculo del flujoóptico minimizando la energía con graph cuts, en ambos casos considerandosecuencias de imágenes RGB y RGB-D. El modelo de texturas dinámicas está muy bien condicionado para lasegmentación de movimiento, y dentro de este contexto desarrollamos unaaplicación con características novedosas: (i) proceso de aprendizaje desacopladoy (ii) algoritmos optimizados para trabajar en placas gráficas GPU (Graphic Process Unit). Además, el modelo ha sido extendido para contemplarsecuencias de imágenes RGB-D, el cual no había sido estudiado hastael momento, permitiéndonos identificar procesos visuales en 3D. Experimentos sobre la base de datos DynTex muestran resultados exitososde performance y de clasificación para la mayoría de las casos. Luego,nuestros análisis sobre secuencias RGB-D revelan la viabilidad de este modelopara aplicaciones 3D. El problema de la estimación del flujo óptico (optical flow) fue abordadomediante la minimización de la energía del campo de vectores utilizando latécnica de graph cuts con una formulación novedosa de la energía. Ampliamosesta formulación para tener en cuenta la profundidad y así calcular el flujo de la escena (scene flow). Hasta donde sabemos, en la literatura, nuncase había utilizado graph cuts para estimar el scene flow. Los resultados obtenidossobre el dataset Middlebury muestran que nuestros algoritmos soncompetitivos comparados con los presentes en el estado del arte y los mejorescon en términos de error angular.
author2 Mejail, Marta
author_facet Mejail, Marta
Gómez Fernández, Francisco Roberto
format Tesis doctoral
Tesis doctoral
publishedVersion
author Gómez Fernández, Francisco Roberto
author_sort Gómez Fernández, Francisco Roberto
title Estimación de movimiento en secuencias de imágenes RGB y RGB-D
title_short Estimación de movimiento en secuencias de imágenes RGB y RGB-D
title_full Estimación de movimiento en secuencias de imágenes RGB y RGB-D
title_fullStr Estimación de movimiento en secuencias de imágenes RGB y RGB-D
title_full_unstemmed Estimación de movimiento en secuencias de imágenes RGB y RGB-D
title_sort estimación de movimiento en secuencias de imágenes rgb y rgb-d
publisher Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales
publishDate 2016
url https://hdl.handle.net/20.500.12110/tesis_n5985_GomezFernandez
https://repositoriouba.sisbi.uba.ar/gsdl/cgi-bin/library.cgi?a=d&c=aextesis&d=tesis_n5985_GomezFernandez_oai
work_keys_str_mv AT gomezfernandezfranciscoroberto estimaciondemovimientoensecuenciasdeimagenesrgbyrgbd
AT gomezfernandezfranciscoroberto motionestimationinrgbandrgbdimagesequences
_version_ 1824354762768777216
spelling I28-R145-tesis_n5985_GomezFernandez_oai2024-09-02 Mejail, Marta Pardo Piccone, Alvaro D. Gómez Fernández, Francisco Roberto 2016-03-30 El movimiento es una característica fundamental para el procesamientode video y sus posteriores aplicaciones. La estimación de movimientoen video es de gran utilidad para definir la correspondencia depuntos en una escena, calcular sus velocidades y así poder discriminar objetos,acciones, segmentar movimiento, etc. El objetivo de este trabajo es realizar un seguimiento preciso y una estimación de movimiento de un gran conjunto de puntos. Esto se conoce comoestimación densa de movimiento. Para ello, se proponen dos líneas principales de estudio: modelos estadísticos de movimiento utilizando texturas dinámicas y el cálculo del flujoóptico minimizando la energía con graph cuts, en ambos casos considerandosecuencias de imágenes RGB y RGB-D. El modelo de texturas dinámicas está muy bien condicionado para lasegmentación de movimiento, y dentro de este contexto desarrollamos unaaplicación con características novedosas: (i) proceso de aprendizaje desacopladoy (ii) algoritmos optimizados para trabajar en placas gráficas GPU (Graphic Process Unit). Además, el modelo ha sido extendido para contemplarsecuencias de imágenes RGB-D, el cual no había sido estudiado hastael momento, permitiéndonos identificar procesos visuales en 3D. Experimentos sobre la base de datos DynTex muestran resultados exitososde performance y de clasificación para la mayoría de las casos. Luego,nuestros análisis sobre secuencias RGB-D revelan la viabilidad de este modelopara aplicaciones 3D. El problema de la estimación del flujo óptico (optical flow) fue abordadomediante la minimización de la energía del campo de vectores utilizando latécnica de graph cuts con una formulación novedosa de la energía. Ampliamosesta formulación para tener en cuenta la profundidad y así calcular el flujo de la escena (scene flow). Hasta donde sabemos, en la literatura, nuncase había utilizado graph cuts para estimar el scene flow. Los resultados obtenidossobre el dataset Middlebury muestran que nuestros algoritmos soncompetitivos comparados con los presentes en el estado del arte y los mejorescon en términos de error angular. Motion is a fundamental cue for video processing and its furtherapplications. Video motion estimation is very useful to find correspondencesof points in a scene, computing their velocities, discriminate objects,actions, segment motion, etc. The aim of this work is to accurately track the motion of a large set ofpoints in videos. This is known as dense motion estimation. To this end,two main lines of study were proposed: statistical models of motion usingdynamic textures and optical flow calculation using graph cuts for energyminimization, considering in both cases sequences of RGB and RGB-D images. The dynamic textures model is well suited for motion segmentation,and in this context we develop an application with novel features: (i) a decoupledlearning step (ii) GPU-translated algorithms optimized to work on GPU (Graphic Process Unit). Also, the model has been extended to process RGB-D sequences, which had not been studied so far, allowing us to identifyvisual processes in 3D. Experiments on the Dyntex dataset show successfulresults of performance and classification for most cases. Then our analysisof RGB-D sequences reveal the viability of this model for 3D applications. The problem of optical flow estimation was addressed by minimizingthe energy of the vector field using the graph cuts method with a novel formulationof energy. We extend this formulation to take depth into accountand thus estimate the Scene Flow. To the best of our knowledge, scene flowestimation using graph cuts has never been used in the literature. The resultsobtained on the Middlebury dataset show that our algorithms are competitivewith the state of the art and the best performing in terms of angularerror. Fil: Gómez Fernández, Francisco Roberto. Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales; Argentina. application/pdf https://hdl.handle.net/20.500.12110/tesis_n5985_GomezFernandez eng Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales info:eu-repo/semantics/openAccess https://creativecommons.org/licenses/by-nc-sa/2.5/ar ESTIMACION DE MOVIMIENTO TEXTURAS DINAMICAS OPTICAL FLOW SCENE FLOW GRAPH CUTS MOTION ESTIMATION DYNAMIC TEXTURES OPTICAL FLOW SCENE FLOW GRAPH CUTS Estimación de movimiento en secuencias de imágenes RGB y RGB-D Motion estimation in RGB and RGB-D image sequences info:eu-repo/semantics/doctoralThesis info:ar-repo/semantics/tesis doctoral info:eu-repo/semantics/publishedVersion https://repositoriouba.sisbi.uba.ar/gsdl/cgi-bin/library.cgi?a=d&c=aextesis&d=tesis_n5985_GomezFernandez_oai