듀엣: 브레인웨이브 음악 BCI 프로젝트, 칼 해크스 2024 우승
하이디 두란
업데이트됨
2024. 10. 21.
듀엣: 브레인웨이브 음악 BCI 프로젝트, 칼 해크스 2024 우승
하이디 두란
업데이트됨
2024. 10. 21.
듀엣: 브레인웨이브 음악 BCI 프로젝트, 칼 해크스 2024 우승
하이디 두란
업데이트됨
2024. 10. 21.
USC Berkley의 재능 있는 학생들로 구성된 팀이 혁신적인 BCI 음악 프로젝트, "Duet."으로 Cal Hacks 2024에서 1위를 차지했다.
Duet은 Emotiv EPOC X 헤드셋과 EmotivPRO 소프트웨어, 그리고 Cortex API가 수집하고 변환한 실시간 감정 상태를 바탕으로 AI를 사용해 음악을 작곡한다.
학생들은 Duet이 맞춤형 음악 경험을 통해 어린이와 장애가 있는 개인들에게 효과적인 음악 치료를 제공하기를 기대한다.
Emotiv은 USC Berkley의 학생 Jiahui Jin, Sophia Zhang, Daniel Wang, Justin Wu가 세계 최대 규모의 대학생 해커톤인 Cal Hacks 2024에서 1위를 차지한 것을 진심으로 축하합니다. Jin 등은 BCI 프로젝트 Duet을 통해 실시간 뇌파 성과 지표를 AI가 생성한 음악과 시각적 피드백으로 변환합니다.
Duet의 출발점은 발달장애가 있는 어린이들에게 음악을 가르치는 어려움을 해결하는 것이었다.
"안타깝게도 많은 아이들은 소통하고 창의적으로 자신을 표현하는 데 필요한 도구를 갖지 못한 채 남겨집니다,"라고 팀은 설명합니다. "바로 그 지점에서 Duet이 등장합니다. EEG 기술을 활용해, 우리는 이 아이들이 음악과 상호작용하는 방식을 바꾸고, 자신들의 목소리와 감정을 나눌 수 있는 수단을 제공하고자 합니다."
작동 방식
Duet은 뇌파를 읽어 사람의 실시간 감정 상태를 바탕으로 인공지능을 사용해 음악을 작곡한다. 팀은 Emotiv EPOC X 헤드셋을 사용해 뇌파 데이터를 스트리밍했고, Emotiv Cortex API를 통해 Python으로 이를 처리했다. 이러한 도전을 돕기 위해 Emotiv은 학생들이 EEG 하드웨어를 빌릴 수 있도록 지원했으며, PRO 구독 소프트웨어를 임시로 사용할 수 있게 했다.
Emotiv의 독자적인 머신러닝이 뇌 활동을 감정 상태(성과 지표)로 분류했고, 이를 Google의 Gemini LLM에 입력해 음악을 생성했다. 고정된 규칙을 따르는 대신, Duet은 감정, 사용 가능한 악기, 이전 출력에 따라 다음 몇 초의 음악을 결정하는 실시간 작곡가처럼 동작했다.
Sonic Pi가 실시간 음악 재생을 담당했고, SingleStore가 저지연 데이터를 관리했으며, 우리의 Next.js 프런트엔드는 뇌파와 그에 대응하는 음악을 모두 실시간으로 시각화했다고 팀은 설명했다.
"Duet에서는 모든 사람에게 음악이 포용적인 경험이 되도록 하는 데 전념하고 있으며, 모든 아이들—그리고 자신을 표현하는 데 어려움을 겪는 모든 이들—이 자신의 진정한 창의적 자아를 전달할 기회를 갖도록 합니다!"
Duet BCI의 미래
Jin 등은 가장 큰 과제가 인공지능으로 라이브 음악을 생성하는 방법을 떠올리는 것이었다고 말했다.
"처음에는 그것이 불가능하다고 생각했고 기술이 아직 “충분히 갖춰지지 않았다”고 여겼습니다 — 온라인에서도 관련된 내용을 전혀 찾지 못했고, 심지어 EEG를 활용할 수 있는 다른 아이디어로 어떻게 전환할지 몇 시간씩 고민하기도 했습니다,"라고 그들은 말했다.
"하지만 결국 끝까지 밀고 나가, 우리가 아는 한 다른 곳에는 존재하지 않는 완전히 새로운 실시간 AI 음악 생성 방식을 만들어냈습니다,"라고 Jin 등은 설명했다. "이러한 종류의 하드웨어를 다루는 것이 대부분 처음이었고, 컴퓨터에 제대로 연결하는 과정에서 많은 문제를 겪었지만 — 결국 모든 것이 원활하게 작동하게 되었고, 모든 것을 작동시키는 것은 우리에게 정말 큰 성과였습니다!"
Duet에 대해 더 알아보고 GitHub의 코드를 직접 사용해 보려면, DevPost의 전체 이야기를 확인하세요.
Emotiv의 모든 구성원을 대표해 - 축하합니다, 팀 여러분, 정말 자랑스럽습니다!
다음 콘텐츠도 함께 보세요:
모두를 위한 BCI 혁신
Emotiv은 인류의 발전을 위한 혁신을 자랑스럽게 지원합니다. 제품 대여, 기부, 또는 EEG나 BCI 프로젝트를 위한 Emotiv 제품 구입에 관한 재정 지원을 문의하고 싶으시다면, 언제든지 연락해 주세요.
문의하기
USC Berkley의 재능 있는 학생들로 구성된 팀이 혁신적인 BCI 음악 프로젝트, "Duet."으로 Cal Hacks 2024에서 1위를 차지했다.
Duet은 Emotiv EPOC X 헤드셋과 EmotivPRO 소프트웨어, 그리고 Cortex API가 수집하고 변환한 실시간 감정 상태를 바탕으로 AI를 사용해 음악을 작곡한다.
학생들은 Duet이 맞춤형 음악 경험을 통해 어린이와 장애가 있는 개인들에게 효과적인 음악 치료를 제공하기를 기대한다.
Emotiv은 USC Berkley의 학생 Jiahui Jin, Sophia Zhang, Daniel Wang, Justin Wu가 세계 최대 규모의 대학생 해커톤인 Cal Hacks 2024에서 1위를 차지한 것을 진심으로 축하합니다. Jin 등은 BCI 프로젝트 Duet을 통해 실시간 뇌파 성과 지표를 AI가 생성한 음악과 시각적 피드백으로 변환합니다.
Duet의 출발점은 발달장애가 있는 어린이들에게 음악을 가르치는 어려움을 해결하는 것이었다.
"안타깝게도 많은 아이들은 소통하고 창의적으로 자신을 표현하는 데 필요한 도구를 갖지 못한 채 남겨집니다,"라고 팀은 설명합니다. "바로 그 지점에서 Duet이 등장합니다. EEG 기술을 활용해, 우리는 이 아이들이 음악과 상호작용하는 방식을 바꾸고, 자신들의 목소리와 감정을 나눌 수 있는 수단을 제공하고자 합니다."
작동 방식
Duet은 뇌파를 읽어 사람의 실시간 감정 상태를 바탕으로 인공지능을 사용해 음악을 작곡한다. 팀은 Emotiv EPOC X 헤드셋을 사용해 뇌파 데이터를 스트리밍했고, Emotiv Cortex API를 통해 Python으로 이를 처리했다. 이러한 도전을 돕기 위해 Emotiv은 학생들이 EEG 하드웨어를 빌릴 수 있도록 지원했으며, PRO 구독 소프트웨어를 임시로 사용할 수 있게 했다.
Emotiv의 독자적인 머신러닝이 뇌 활동을 감정 상태(성과 지표)로 분류했고, 이를 Google의 Gemini LLM에 입력해 음악을 생성했다. 고정된 규칙을 따르는 대신, Duet은 감정, 사용 가능한 악기, 이전 출력에 따라 다음 몇 초의 음악을 결정하는 실시간 작곡가처럼 동작했다.
Sonic Pi가 실시간 음악 재생을 담당했고, SingleStore가 저지연 데이터를 관리했으며, 우리의 Next.js 프런트엔드는 뇌파와 그에 대응하는 음악을 모두 실시간으로 시각화했다고 팀은 설명했다.
"Duet에서는 모든 사람에게 음악이 포용적인 경험이 되도록 하는 데 전념하고 있으며, 모든 아이들—그리고 자신을 표현하는 데 어려움을 겪는 모든 이들—이 자신의 진정한 창의적 자아를 전달할 기회를 갖도록 합니다!"
Duet BCI의 미래
Jin 등은 가장 큰 과제가 인공지능으로 라이브 음악을 생성하는 방법을 떠올리는 것이었다고 말했다.
"처음에는 그것이 불가능하다고 생각했고 기술이 아직 “충분히 갖춰지지 않았다”고 여겼습니다 — 온라인에서도 관련된 내용을 전혀 찾지 못했고, 심지어 EEG를 활용할 수 있는 다른 아이디어로 어떻게 전환할지 몇 시간씩 고민하기도 했습니다,"라고 그들은 말했다.
"하지만 결국 끝까지 밀고 나가, 우리가 아는 한 다른 곳에는 존재하지 않는 완전히 새로운 실시간 AI 음악 생성 방식을 만들어냈습니다,"라고 Jin 등은 설명했다. "이러한 종류의 하드웨어를 다루는 것이 대부분 처음이었고, 컴퓨터에 제대로 연결하는 과정에서 많은 문제를 겪었지만 — 결국 모든 것이 원활하게 작동하게 되었고, 모든 것을 작동시키는 것은 우리에게 정말 큰 성과였습니다!"
Duet에 대해 더 알아보고 GitHub의 코드를 직접 사용해 보려면, DevPost의 전체 이야기를 확인하세요.
Emotiv의 모든 구성원을 대표해 - 축하합니다, 팀 여러분, 정말 자랑스럽습니다!
다음 콘텐츠도 함께 보세요:
모두를 위한 BCI 혁신
Emotiv은 인류의 발전을 위한 혁신을 자랑스럽게 지원합니다. 제품 대여, 기부, 또는 EEG나 BCI 프로젝트를 위한 Emotiv 제품 구입에 관한 재정 지원을 문의하고 싶으시다면, 언제든지 연락해 주세요.
문의하기
USC Berkley의 재능 있는 학생들로 구성된 팀이 혁신적인 BCI 음악 프로젝트, "Duet."으로 Cal Hacks 2024에서 1위를 차지했다.
Duet은 Emotiv EPOC X 헤드셋과 EmotivPRO 소프트웨어, 그리고 Cortex API가 수집하고 변환한 실시간 감정 상태를 바탕으로 AI를 사용해 음악을 작곡한다.
학생들은 Duet이 맞춤형 음악 경험을 통해 어린이와 장애가 있는 개인들에게 효과적인 음악 치료를 제공하기를 기대한다.
Emotiv은 USC Berkley의 학생 Jiahui Jin, Sophia Zhang, Daniel Wang, Justin Wu가 세계 최대 규모의 대학생 해커톤인 Cal Hacks 2024에서 1위를 차지한 것을 진심으로 축하합니다. Jin 등은 BCI 프로젝트 Duet을 통해 실시간 뇌파 성과 지표를 AI가 생성한 음악과 시각적 피드백으로 변환합니다.
Duet의 출발점은 발달장애가 있는 어린이들에게 음악을 가르치는 어려움을 해결하는 것이었다.
"안타깝게도 많은 아이들은 소통하고 창의적으로 자신을 표현하는 데 필요한 도구를 갖지 못한 채 남겨집니다,"라고 팀은 설명합니다. "바로 그 지점에서 Duet이 등장합니다. EEG 기술을 활용해, 우리는 이 아이들이 음악과 상호작용하는 방식을 바꾸고, 자신들의 목소리와 감정을 나눌 수 있는 수단을 제공하고자 합니다."
작동 방식
Duet은 뇌파를 읽어 사람의 실시간 감정 상태를 바탕으로 인공지능을 사용해 음악을 작곡한다. 팀은 Emotiv EPOC X 헤드셋을 사용해 뇌파 데이터를 스트리밍했고, Emotiv Cortex API를 통해 Python으로 이를 처리했다. 이러한 도전을 돕기 위해 Emotiv은 학생들이 EEG 하드웨어를 빌릴 수 있도록 지원했으며, PRO 구독 소프트웨어를 임시로 사용할 수 있게 했다.
Emotiv의 독자적인 머신러닝이 뇌 활동을 감정 상태(성과 지표)로 분류했고, 이를 Google의 Gemini LLM에 입력해 음악을 생성했다. 고정된 규칙을 따르는 대신, Duet은 감정, 사용 가능한 악기, 이전 출력에 따라 다음 몇 초의 음악을 결정하는 실시간 작곡가처럼 동작했다.
Sonic Pi가 실시간 음악 재생을 담당했고, SingleStore가 저지연 데이터를 관리했으며, 우리의 Next.js 프런트엔드는 뇌파와 그에 대응하는 음악을 모두 실시간으로 시각화했다고 팀은 설명했다.
"Duet에서는 모든 사람에게 음악이 포용적인 경험이 되도록 하는 데 전념하고 있으며, 모든 아이들—그리고 자신을 표현하는 데 어려움을 겪는 모든 이들—이 자신의 진정한 창의적 자아를 전달할 기회를 갖도록 합니다!"
Duet BCI의 미래
Jin 등은 가장 큰 과제가 인공지능으로 라이브 음악을 생성하는 방법을 떠올리는 것이었다고 말했다.
"처음에는 그것이 불가능하다고 생각했고 기술이 아직 “충분히 갖춰지지 않았다”고 여겼습니다 — 온라인에서도 관련된 내용을 전혀 찾지 못했고, 심지어 EEG를 활용할 수 있는 다른 아이디어로 어떻게 전환할지 몇 시간씩 고민하기도 했습니다,"라고 그들은 말했다.
"하지만 결국 끝까지 밀고 나가, 우리가 아는 한 다른 곳에는 존재하지 않는 완전히 새로운 실시간 AI 음악 생성 방식을 만들어냈습니다,"라고 Jin 등은 설명했다. "이러한 종류의 하드웨어를 다루는 것이 대부분 처음이었고, 컴퓨터에 제대로 연결하는 과정에서 많은 문제를 겪었지만 — 결국 모든 것이 원활하게 작동하게 되었고, 모든 것을 작동시키는 것은 우리에게 정말 큰 성과였습니다!"
Duet에 대해 더 알아보고 GitHub의 코드를 직접 사용해 보려면, DevPost의 전체 이야기를 확인하세요.
Emotiv의 모든 구성원을 대표해 - 축하합니다, 팀 여러분, 정말 자랑스럽습니다!
다음 콘텐츠도 함께 보세요:
모두를 위한 BCI 혁신
Emotiv은 인류의 발전을 위한 혁신을 자랑스럽게 지원합니다. 제품 대여, 기부, 또는 EEG나 BCI 프로젝트를 위한 Emotiv 제품 구입에 관한 재정 지원을 문의하고 싶으시다면, 언제든지 연락해 주세요.
