• ¡Un talentoso grupo de estudiantes de la UC Berkeley se llevó el primer premio en Cal Hacks 2024 por su innovador proyecto de música BCI, "Duet"!

• Duet utiliza IA para componer música basada en estados emocionales en tiempo real, recopilados y traducidos por un dispositivo Emotiv EPOC X y el software EmotivPRO con la API Cortex.

• Los estudiantes esperan que Duet ofrezca una musicoterapia eficaz para niños y personas con discapacidad a través de experiencias musicales personalizadas.

Emotiv extiende sus sinceras felicitaciones a los estudiantes de la UC Berkeley Jiahui Jin, Sophia Zhang, Daniel Wang y Justin Wu por ganar el primer premio en Cal Hacks 2024, el hackatón universitario más grande del mundo. El proyecto BCI de Jin et al., Duet, traduce las métricas de rendimiento de ondas cerebrales en tiempo real en música generada por IA y retroalimentación visual.

La inspiración para Duet fue responder a los desafíos de enseñar música a niños con discapacidades del desarrollo.

"Lamentablemente, muchos niños se quedan sin las herramientas que necesitan para comunicarse y expresarse creativamente", explica el equipo. "Ahí es donde entra Duet. Al utilizar la tecnología EEG, nuestro objetivo es transformar la forma en que estos niños interactúan con la música, dándoles una voz y un medio para compartir sus sentimientos".

Cómo funciona

Duet utiliza inteligencia artificial para componer música basada en los estados emocionales de una persona en tiempo real mediante la lectura de ondas cerebrales. El equipo utilizó dispositivos Emotiv EPOC X para transmitir datos de ondas cerebrales y los procesó a través de Python con la API Cortex de Emotiv. Para ayudarlos en sus esfuerzos, Emotiv organizó el préstamo del hardware EEG a los estudiantes y les otorgó acceso temporal a su software de suscripción PRO.

El aprendizaje automático patentado de Emotiv clasificó la actividad cerebral en estados emocionales (métricas de rendimiento), que se introdujeron en el LLM Gemini de Google para generar música. En lugar de seguir reglas fijas, Duet actuó como un compositor en vivo, decidiendo los siguientes segundos de música en función de las emociones, los instrumentos disponibles y los resultados anteriores.

Sonic Pi se encargó de la reproducción de música en vivo, SingleStore gestionó los datos de baja latencia y nuestro frontend de Next.js visualizó tanto las ondas cerebrales como la música correspondiente en tiempo real, explicó el equipo.

"En Duet, estamos comprometidos a hacer de la música una experiencia inclusiva para todos, garantizando que cada niño, y cualquier persona que tenga dificultades para expresarse, tenga la oportunidad de transmitir su verdadero ser creativo".

El futuro de Duet BCI

Jin et al. dicen que su mayor desafío fue encontrar una manera de generar música en vivo con inteligencia artificial.

"Originalmente pensamos que era imposible y que la tecnología aún no estaba 'allí'; no pudimos encontrar nada en línea al respecto, e incluso pasamos horas pensando en cómo pivotar hacia otra idea con la que pudiéramos usar nuestros EEG", dijeron.

"Sin embargo, finalmente salimos adelante y creamos un método completamente nuevo para generar música con IA en vivo que, hasta donde sabemos, no existe en ningún otro lugar", explicó Jin et al. "Fue la primera vez para la mayoría de nosotros trabajando con este tipo de hardware, y tuvimos muchos problemas para que se conectara correctamente a nuestras computadoras, pero al final, logramos que todo funcionara sin problemas, ¡así que fue una gran hazaña para nosotros hacer que todo funcionara!"

Para obtener más información sobre Duet y ver el código en GitHub para probarlo usted mismo, consulte la historia completa en DevPost.

De parte de todos nosotros en Emotiv: ¡felicitaciones, equipo, estamos muy orgullosos de ustedes!

También podría disfrutar de:

• Este programa BCI conecta a niños con discapacidades con su mundo

• Terapia de neurofeedback musical para tratar la depresión en personas mayores

• Interfaz cerebro-computadora de música: cómo controlar Spotify con la mente

Innovación BCI para todos

Emotiv apoya con orgullo la innovación para el mejoramiento de la humanidad. Si desea solicitar información sobre el préstamo de productos, donaciones o asistencia financiera para obtener productos de Emotiv para su proyecto EEG o BCI, nos encantaría saber de usted.

Contáctenos