Fayez Salka – física y artista 3D – nos enseña en un tweet cómo usa la tecnología AR o Realidad Aumentada para darle vida a un pianista virtual con un piano de verdad. Nos espera un futuro un tanto curioso:
️?
Realidad Aumentada para músicos – realmente impresionante
En el vídeo, Salka entra en una tienda de pianos. Apunta con la cámara del móvil a varios pianos e inmediatamente aparece en la pantalla un pianista en realidad aumentada y empieza a tocar canciones de galardonados pianistas mientras puedes ver la partitura pasar por la pantalla a tiempo real. Mejor échale un vistazo tú mismo.
Estás viendo un contenido de marcador de posición de X. Para acceder al contenido real, haz clic en el siguiente botón. Ten en cuenta que al hacerlo compartirás datos con terceros proveedores.
Reconocimiento de teclas preciso, incluso sin una cámara 3D
La app reconoce el piano incluidas las notas de cada tecla. Determina la posición y orientación del piano en un espacio 3D. Con una precisión de hasta 1 centímetro. Esto lo consigue analizando cada frame, por eso no se necesita una cámara 3D.
La precisión es crucial para que el pianista virtual pueda alinearse y estar visualmente superpuesto exactamente donde está el piano. Lo interesante es que utiliza un algoritmo gracias al cual la app aprende por si misma y por eso mismo funciona con cualquier piano. Aunque la iluminación sea pésima. No necesita marcas o puntos de guía, ni siquiera hay que escanear el piano. Increíble.
Ya disponible en la App Store
Fayez Salka y su compañero Anas Wattar de Massive Technologies Inc. ya han pulido los bugs y puesto a disposición de todo el mundo la app. Estamos seguros de que esto es solo el principio.
Un pianista en tú mano
Desde un punto de vista creativo, esta app es una herramienta excelente para disfrutar de la música de piano de una forma completamente nueva. En un futuro la app podría extenderse a otros instrumentos y areas musicales.
Un paso adelante en el sector musical de la Inteligencia Artificial
Hasta ahora la música en la que no intervienen las personas se limitaba al uso de playback, secuencias y demás, pero ahora ha cambiado por completo: simplemente, apuntas a un piano con la cámara de tu móvil y el resto se lo dejas a la app.
Profesores “virtuales”
Podrás reproducir las piezas que quieras aprender de una manera directa y comprensible. Al fin y al cabo, el piano no es el que toca, sino un pianista virtual. Por fin una app de realidad virtual con verdadero potencial para jóvenes talentos.
¿Cómo nos sorprenderá este tipo de tecnología en el futuro?
No nos engañemos, a pesar de su funcionalidad, esta app es solo el principio. No es algo exclusivamente visual y estético, sino que se trata de algo didáctico y que en un futuro se puede extender a todo el mercado musical. ¿No os parece curioso tener un profesor metido en el bolsillo 24/7? Podrás pasar a la siguiente lección cuando quieras, e incluso repetirla si no te ha quedado claro, las veces que quieras, en busca de la perfección.
Todavía quedan muchas ideas en el tintero
Este proyecto empezó como un hobby para Salka y al cooperar con Massive Technologies se convirtió en su trabajo principal. Es obvio que queda mucho por llegar. Según lo que comentaba Fayez, ya está en marcha otras cuantas ideas. Para haceros una idea del potencial que tiene Massive, Piano 3D es una app que sacaron hace algún tiempo ya con cerca de 7 millones de descargas, y contando…
Estás viendo un contenido de marcador de posición de YouTube. Para acceder al contenido real, haz clic en el siguiente botón. Ten en cuenta que al hacerlo compartirás datos con terceros proveedores.
Os dejamos algunos enlaces de apps de Massive Technologies:
Comentarios 0
Aún no hay comentarios