Motion annotation in complex video datasets

Motion segmentation refers to the process of separating regions and trajectories from a video sequence into coherent subsets of space and time. In this thesis, we created a new multifaceted motion segmentation dataset enclosing real-life long and short sequences, with different numbers of motions an...

Descripción completa

Detalles Bibliográficos
Autor: Mahmood, Muhammad Habib
Tipo de recurso: tesis doctoral
Estado:Versión publicada
Fecha de publicación:2018
País:España
Institución:CBUC, CESCA
Repositorio:TDR. Tesis Doctorales en Red
OAI Identifier:oai:www.tdx.cat:10803/667583
Acceso en línea:http://hdl.handle.net/10803/667583
Access Level:acceso abierto
Palabra clave:Computer vision
Visió per ordinador
Visión por ordenador
Motion segmentation
Segmentació del moviment
Segmentación del movimiento
Image analysis
Anàlisi d'imatges
Análisis de imágenes
Machine learning
Aprenentatge automàtic
Aprendizaje automático
Automated tools
Eines automàtiques
Herarmientas automáticas
Motion datasets
68
id ES_4345ea32136dd06cad7e36dbdff6aed1
oai_identifier_str oai:www.tdx.cat:10803/667583
network_acronym_str ES
network_name_str España
repository_id_str
spelling Motion annotation in complex video datasetsMahmood, Muhammad HabibComputer visionVisió per ordinadorVisión por ordenadorMotion segmentationSegmentació del movimentSegmentación del movimientoImage analysisAnàlisi d'imatgesAnálisis de imágenesMachine learningAprenentatge automàticAprendizaje automáticoAutomated toolsEines automàtiquesHerarmientas automáticasMotion datasets68Motion segmentation refers to the process of separating regions and trajectories from a video sequence into coherent subsets of space and time. In this thesis, we created a new multifaceted motion segmentation dataset enclosing real-life long and short sequences, with different numbers of motions and frames per sequence, and real distortions with missing data. Trajectory- and region-based ground-truth is provided on all the frames of all the sequences. We also proposed a new semi-automatic tool for delineating the trajectories in complex videos, even in videos captured from moving cameras. With a minimal manual annotation of an object mask, the algorithm is able to propagate the label mask in all the frames. Object label correction based on static and moving occluder is performed by applying occluder mask tracking for a given depth ordering. The results show that our cascaded-naive approach provides successful results in a variety of video sequences.La segmentació del moviment es refereix al procés de separar regions i trajectòries d'una seqüència de vídeo en subconjunts coherents d'espai i de temps. En aquesta tesi hem creat un nou i multifacètic dataset amb seqüències de la vida real que inclou diferent número de moviments i fotogrames per seqüència i distorsions amb dades incomplertes. A més, inclou ground-truth en tots els fotogrames basat en mesures de trajectòria i regió. Hem proposat també una nova eina semiautomàtica per delinear les trajectòries en vídeos complexos, fins i tot en vídeos capturats amb càmeres mòbils. Amb una mínima anotació manual dels objectes, l'algoritme és capaç de propagar-la en tots els fotogrames. Durant les oclusions, la correcció de les etiquetes es realitza aplicant el seguiment de la màscara per a cada ordre de profunditat. Els resultats obtinguts mostren que el nostre enfocament ofereix resultats reeixits en una àmplia varietat de seqüències de vídeo.Universitat de GironaOliver i Malagelada, ArnauUniversitat de Girona. Departament d'Arquitectura i Tecnologia de Computadors201920192018info:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/publishedVersion105 p.application/pdfapplication/pdfhttp://hdl.handle.net/10803/667583TDX (Tesis Doctorals en Xarxa)reponame:TDR. Tesis Doctorales en Redinstname:CBUC, CESCAInglésL'accés als continguts d'aquesta tesi queda condicionat a l'acceptació de les condicions d'ús establertes per la següent llicència Creative Commons: http://creativecommons.org/licenses/by-nc-sa/4.0/http://creativecommons.org/licenses/by-nc-sa/4.0/info:eu-repo/semantics/openAccessoai:www.tdx.cat:10803/6675832026-06-14T12:46:07Z
dc.title.none.fl_str_mv Motion annotation in complex video datasets
title Motion annotation in complex video datasets
spellingShingle Motion annotation in complex video datasets
Mahmood, Muhammad Habib
Computer vision
Visió per ordinador
Visión por ordenador
Motion segmentation
Segmentació del moviment
Segmentación del movimiento
Image analysis
Anàlisi d'imatges
Análisis de imágenes
Machine learning
Aprenentatge automàtic
Aprendizaje automático
Automated tools
Eines automàtiques
Herarmientas automáticas
Motion datasets
68
title_short Motion annotation in complex video datasets
title_full Motion annotation in complex video datasets
title_fullStr Motion annotation in complex video datasets
title_full_unstemmed Motion annotation in complex video datasets
title_sort Motion annotation in complex video datasets
dc.creator.none.fl_str_mv Mahmood, Muhammad Habib
author Mahmood, Muhammad Habib
author_facet Mahmood, Muhammad Habib
author_role author
dc.contributor.none.fl_str_mv Oliver i Malagelada, Arnau
Universitat de Girona. Departament d'Arquitectura i Tecnologia de Computadors
dc.subject.none.fl_str_mv Computer vision
Visió per ordinador
Visión por ordenador
Motion segmentation
Segmentació del moviment
Segmentación del movimiento
Image analysis
Anàlisi d'imatges
Análisis de imágenes
Machine learning
Aprenentatge automàtic
Aprendizaje automático
Automated tools
Eines automàtiques
Herarmientas automáticas
Motion datasets
68
topic Computer vision
Visió per ordinador
Visión por ordenador
Motion segmentation
Segmentació del moviment
Segmentación del movimiento
Image analysis
Anàlisi d'imatges
Análisis de imágenes
Machine learning
Aprenentatge automàtic
Aprendizaje automático
Automated tools
Eines automàtiques
Herarmientas automáticas
Motion datasets
68
description Motion segmentation refers to the process of separating regions and trajectories from a video sequence into coherent subsets of space and time. In this thesis, we created a new multifaceted motion segmentation dataset enclosing real-life long and short sequences, with different numbers of motions and frames per sequence, and real distortions with missing data. Trajectory- and region-based ground-truth is provided on all the frames of all the sequences. We also proposed a new semi-automatic tool for delineating the trajectories in complex videos, even in videos captured from moving cameras. With a minimal manual annotation of an object mask, the algorithm is able to propagate the label mask in all the frames. Object label correction based on static and moving occluder is performed by applying occluder mask tracking for a given depth ordering. The results show that our cascaded-naive approach provides successful results in a variety of video sequences.
publishDate 2018
dc.date.none.fl_str_mv 2018
2019
2019
dc.type.none.fl_str_mv info:eu-repo/semantics/doctoralThesis
info:eu-repo/semantics/publishedVersion
format doctoralThesis
status_str publishedVersion
dc.identifier.none.fl_str_mv http://hdl.handle.net/10803/667583
url http://hdl.handle.net/10803/667583
dc.language.none.fl_str_mv Inglés
language_invalid_str_mv Inglés
dc.rights.none.fl_str_mv http://creativecommons.org/licenses/by-nc-sa/4.0/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-sa/4.0/
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 105 p.
application/pdf
application/pdf
dc.publisher.none.fl_str_mv Universitat de Girona
publisher.none.fl_str_mv Universitat de Girona
dc.source.none.fl_str_mv TDX (Tesis Doctorals en Xarxa)
reponame:TDR. Tesis Doctorales en Red
instname:CBUC, CESCA
instname_str CBUC, CESCA
reponame_str TDR. Tesis Doctorales en Red
collection TDR. Tesis Doctorales en Red
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869407012151885824
score 15.301603