On Considering Semantics for Multi-image Processing

En el processament de múltiples imatges, l'aprofitament de la informació semàntica és essencial per a operacions conscients del contingut i per assegurar la consistència entre les imatges. Tanmateix, això presenta desafiaments en obtenir dades semàntiques d'alta precisió ràpidament, adapta...

Descripción completa

Detalles Bibliográficos
Autor: Xue, Danna
Tipo de recurso: tesis doctoral
Estado:Versión publicada
Fecha de publicación:2024
País:España
Institución:CBUC, CESCA
Repositorio:TDR. Tesis Doctorales en Red
OAI Identifier:oai:www.tdx.cat:10803/692144
Acceso en línea:http://hdl.handle.net/10803/692144
Access Level:acceso abierto
Palabra clave:Aprenentatge profund
Deep learning
Aprendizaje profundo
Segmentació semàntica
SEmantic segmentation
Segmentación semántica
Restauració d'imatges
Image restoration
Restauración de imágenes
Tecnologies
04
Descripción
Sumario:En el processament de múltiples imatges, l'aprofitament de la informació semàntica és essencial per a operacions conscients del contingut i per assegurar la consistència entre les imatges. Tanmateix, això presenta desafiaments en obtenir dades semàntiques d'alta precisió ràpidament, adaptar la informació semàntica a diferents tasques i mantenir la consistència en els resultats del processament. Aquesta tesi aborda aquests desafiaments mitjançant diversos enfocaments proposats: Segmentació semàntica adaptable: Introduïm un marc flexible per a l'entrenament de models de segmentació semàntica amb destil·lació de coneixements, permetent una adaptació ràpida entre els compromisos de precisió i eficiència. Per millorar encara més la precisió dels models compactes, s'introdueix supervisió de contorns per obtenir millors detalls dels límits dels objectes. Integració semàntica en la recolorització: Explorem la integració de característiques semàntiques en la recolorització múltiples imatges. A més, proposem introduir característiques de noms de colors en l'harmonització del color. Demostrem que la integració de la semàntica millora la consistència i harmonia del color de la imatge, produint millors efectes visuals perceptius. Anàlisi de l'impacte temporal: Investiguem l'impacte de la informació temporal en la qualitat de restauració de múltiples imatges, destacant el compromís entre percepció i distorsió i la importància de l'alineació. Demostrem que el compromís entre percepció i distorsió encara existeix en introduir informació temporal, i que l'alineació empitjora tant la percepció com la distorsió. La nostra anàlisi proporciona una referència per dissenyar algoritmes de restauració de múltiples fotogrames i estratègies de filmació potencials. Cada enfocament contribueix a superar els desafiaments de l'aprofitament de la informació semàntica en el processament de múltiples imatges, amb l'objectiu de millorar tant l'eficiència com l'eficàcia en diverses aplicacions.