El reconocido Instituto Tecnológico de Massachusetts (MIT), a través de su Laboratorio de Ciencias de la Computación e Inteligencia Artificial (CSAIL), desarrolló una aplicación que identifica los instrumentos de una canción en un video, para después elegir cuál se quiere escuchar.
Se trata de PixelPlayer, que además permite variar el volumen de cada instrumento por separado.
“Utiliza redes neuronales para identificar regiones de pixeles asociadas con frecuencias de sonido específicas, para luego separar los sonidos individuales”, explica el CSAIL.
El sistema utiliza aprendizaje profundo y se entrenó viendo 60 horas de actuaciones musicales, agrega el organismo.
De acuerdo con el equipo del CSAIL, en el futuro se planea mejorar la calidad del audio, agregar más instrumentos (por el momento, sólo se pueden identificar alrededor de 20) y trabajar con más combinaciones de instrumentos.
Aquí te dejamos la muestra de lo que PixelPlayer es capaz de hacer:
