A scalable approach to video summarization and adaptation
- Autores: Luis Herranz Arribas
- Directores de la Tesis: José María Martínez Sánchez (dir. tes.)
- Lectura: En la Universidad Autónoma de Madrid ( España ) en 2010
- Idioma: inglés
- Tribunal Calificador de la Tesis: Narciso García Santos (presid.), Jesús Bescós Cano (secret.), Fernando Díaz (voc.), Rik Van Dewalle (voc.), Janko Calic (voc.)
- Programa de doctorado: [clasificaciones.RUCT.M014801]
- Materias:
- Enlaces
- Tesis en acceso abierto en: Biblos-e Archivo
- Resumen
Actualmente, los usuarios de servicios multimedia se ven abrumados por la ingente cantidad de información presente en las diversas redes. Son numerosas las fuentes de contenido multimedia: medios de comunicación, bibliotecas digitales, redes sociales, etc. Esta creciente cantidad de contenido y la propia naturaleza del vídeo hace difícil su gestión y la búsqueda y acceso a contenido específico. Las abstracciones de vídeo o resúmenes facilitan la navegación permitiendo al usuario hacerse una cierta idea rápida del contenido. Otra característica de los sistemas actuales de acceso a contenido multimedia es la diversidad y heterogeneidad de las formas en que se puede acceder. Terminales de todo tipo se pueden utilizar a través de diferentes redes. La adaptación del contenido multimedia es un elemento clave para proporcionar al usuario contenido adecuado a su contexto de uso.
En general, la creación de resúmenes y la adaptación de contenido son tareas costosas y que requieren bastantes recursos para procesarlos. En esta tesis se proponen métodos eficientes que permitan generar el bitstream (flujo de bits) con el menor retardo posible y consumiendo pocos recursos. Estos métodos se basan en enfoques escalables. Un bitstream es escalable si seleccionando ciertos paquetes se puede obtener una versión básica del contenido, mientras que incluyendo otro conjunto de paquetes se puede obtener una versión mejorada (p.e. mayor resolución).
La tesis explora un uso de la escalabilidad temporal de H.264/AVC distinto al de adaptación temporal, proponiendo un modelo de representación de resúmenes (storyboards, fast forwards y video skims) y un método de generación eficiente basado en la extracción de paquetes. Este enfoque se extiende posteriormente a SVC, utilizando el resto de tipos de escalabilidad para adaptar el resumen a las necesidades de diferentes terminales y redes. La idea de escalabilidad tambien se integra dentro del propio resumen, que se representa, codifica y genera de una forma escalable. Así el sistema puede generar resúmenes de diferentes longitudes sin necesidad de volver a analizar el contenido. El análisis se realiza mediante un método incremental basado en un ranking iterativo, capaz de obtener storyboards y video skims escalables de forma también eficiente. La idea de resumen escalable se estudia también en el contexto de resumenes de tipo comic, inspirados en la estructura de las tiras cómicas.
Por último, se proponen una serie de aplicaciones de los métodos desarrollados en las partes anteriores, como resúmenes personalizados, resúmenes adaptables al tamaño de ventana, resúmenes de multiples canales de TV o resúmenes compuestos.
