Un estudiante de la Salle-URL crea un programa que descifra los acordes de guitarra en vídeos

Posteado por
04Feb

fotoguitarrapostEl estudiante del Grado en Sistemas Audiovisuales de La Salle-URL Marc Ferrer ha creado para su Trabajo Final de Grado un programa capaz de descifrar los acordes de guitarra que se tocan en un vídeo.
El proyecto combina información visual y acústica para extraer información de un vídeo. El objetivo es conseguir la tablatura de la interpretación del guitarrista, un documento donde se indica qué cuerda y qué traste se debe tocar en cada momento.
Marc es un experto guitarrista y por eso conoce los problemas a los que se enfrentan los aprendices. Por eso quiso encontrar una solución para conseguir los acordes de esas canciones de las que solo tenía un vídeo.
El programa se basa en el procesamiento de la imagen, donde se aplican varias técnicas de visión para detectar las cuerdas y los trastes de la guitarra y estabilizar la imagen, compensando los movimientos que, de forma natural, hace el guitarrista al tocar.
Además, también se analiza la mano que lleva la púa. Esta parte del proceso se basa en técnicas de seguimiento de las dos manos y la correlación entre ellas y el audio.
Este sistema no sólo se ha testeado con vídeos grabados para el proyecto sino que también se ha probado cn vídeos de Youtube con los que también ha conseguido muy buenos resultados.
Haciendo click aquí podéis ver el vídeo dónde se explica el proyecto.

 

Comentar

Tu dirección e-mail no se publicará.

Iniciar sesión