Sistema avanzado de resumen de vídeos

Abstract

[ES] Este trabajo consiste en el desarrollo de una aplicación con interfaz de usuario capaz de resumir videos proporcionados por el usuario, en función de distintos parámetros configurables, para obtener resúmenes que se ajusten a las peticiones del usuario.

Para realizar el resumen, el trabajo se basa en tres fuentes de información: los subtítulos, las escenas y los objetos.

Los subtítulos, proporcionados por el usuario, se analizan utilizando técnicas de resumen de texto para obtener la frases que son más relevantes.

Las escenas se obtienen calculando los momentos en los que la imagen del vídeo cambia lo suficiente como para considerarse una nueva escena, y se utilizan para adaptar el resumen a estas escenas obteniendo cortes naturales y para optimizar la detección de objetos.

Los objetos detectados se utilizan para remarcar ciertas partes del vídeo. El usuario indica qué objetos quiere visualizar y estos se detectan en el vídeo y se muestran las escenas que los contienen en el resumen.

Finalmente se realizan pruebas para validar la elección de ciertas opciones como la optimización por escenas.

[EN] This work consists in the development of an application with a user interface capable of summarizing videos provided by the user, based on different configurable parameters, to obtain summaries that adjust to the user's requests.

To make the summary, the work is based on three sources of information: the subtitles, the scenes and the objects.

Subtitles, provided by the user, are analyzed using text summarization techniques to obtain the phrases that are most relevant.

The scenes are obtained by calculating the moments when the video image changes enough to be considered a new scene which are used to adapt the summary to these scenes obtaining natural cuts and to optimize the detection of objects.

Detected objects are used to highlight certain parts of the video. The user indicates which objects she wants to visualize and these are detected in the video and their scenes are shown in the summary.

Finally, tests are carried out to validate the choice of certain options such as optimization by scenes.

[CA] Aquest treball consisteix en el desenvolupament d’una aplicació amb interfície d’usuari capaç de resumir vídeos proporcionats per l’usuari, en funció de diferents paràmetres configurables, per a obtindre resums que s’ajusten a les peticions de l’usuari. Per a realitzar el resum, el treball es basa en tres fonts d’informació: els subtítols, les escenes i els objectes. Els subtítols, proporcionats per l’usuari, s’analitzen utilitzant tècniques de resum de text per a obtindre les frases que són més rellevants. Les escenes s’obtenen calculant els moments en els quals la imatge del vídeo canvia prou com per a considerar-se una nova escena, i s’utilitzen per a adaptar el resum a aquestes escenes obtenint talls naturals i per a optimitzar la detecció d’objectes. Els objectes detectats s’utilitzen per a remarcar certes parts del vídeo. L’usuari indica quins objectes vol visualitzar i aquests es detecten en el vídeo i es mostren les escenes que els contenen en el resum. Finalment es realitzen proves per a validar l’elecció de certes opcions com l’optimització per escenes.