Duet: Brainwaves Music BCI Project, Cal Hacks 2024 우승
H.B.듀란
업데이트됨
2024. 10. 21.
Duet: Brainwaves Music BCI Project, Cal Hacks 2024 우승
H.B.듀란
업데이트됨
2024. 10. 21.
Duet: Brainwaves Music BCI Project, Cal Hacks 2024 우승
H.B.듀란
업데이트됨
2024. 10. 21.
USC Berkeley의 한 재능 있는 학생 그룹이 혁신적인 BCI 음악 프로젝트인 "Duet"으로 Cal Hacks 2024에서 1등상을 차지했습니다.
Duet은 Epoc X 헤드셋과 EmotivPRO 소프트웨어, 그리고 Cortex API를 통해 수집되고 변환된 실시간 감정 상태를 기반으로 AI를 사용하여 음악을 작곡합니다.
학생들은 Duet이 개인 맞춤형 음악 경험을 통해 장애가 있는 아동과 개인들에게 효과적인 음악 치료를 제공할 수 있기를 바라고 있습니다.
Emotiv는 세계 최대 규모의 대학 해커톤인 Cal Hacks 2024에서 1등상을 수상한 USC Berkeley의 Jiahui Jin, Sophia Zhang, Daniel Wang, Justin Wu 학생에게 진심 어린 축하를 전합니다. Jin 등의 BCI 프로젝트인 Duet은 실시간 뇌파 성능 지표를 AI가 생성한 음악과 시각적 피드백으로 변환합니다.
Duet의 영감은 발달 장애 아동에게 음악을 가르치는 데 따르는 어려움을 해결하는 것에서 시작되었습니다.
"안타깝게도 많은 아이들이 소통하고 창의적으로 자신을 표현하는 데 필요한 도구 없이 방치되고 있습니다."라고 팀은 설명합니다. "이것이 바로 Duet이 필요한 이유입니다. EEG 기술을 활용하여 저희는 이러한 아이들이 음악과 상호작용하는 방식을 변화시키고, 이들에게 목소리와 감정을 나눌 수 있는 수단을 제공하고자 합니다."
작동 원리
Duet은 인공지능을 사용하여 뇌파를 읽음으로써 사람의 실시간 감정 상태에 따라 음악을 작곡합니다. 팀은 뇌파 데이터를 스트리밍하기 위해 Epoc X 헤드셋을 사용했으며, Emotiv Cortex API를 탑재한 Python을 통해 이를 처리했습니다. 이들의 노력을 돕기 위해 Emotiv는 학생들이 EEG 하드웨어를 대여할 수 있도록 주선하고 PRO 구독 소프트웨어에 대한 임시 액세스 권한을 부여했습니다.
Emotiv의 독점적인 머신러닝 기술은 뇌 활동을 감정 상태(성능 지표)로 분류하여 음악을 생성하는 Google의 Gemini LLM에 입력했습니다. 정해진 규칙을 따르는 대신, Duet은 감정, 연주 가능한 악기, 그리고 이전 출력 값을 기반으로 다음 몇 초간의 음악을 결정하는 라이브 작곡가 역할을 했습니다.
Sonic Pi가 라이브 음악 재생을 처리했고, SingleStore가 대기 시간이 짧은 데이터를 관리했으며, 저희의 Next.js 프론트엔드가 실시간으로 뇌파와 그에 해당하는 음악을 시각화했다고 팀은 설명했습니다.
"Duet에서 저희는 음악을 모두를 위한 포용적인 경험으로 만들고, 모든 아이들과 자신을 표현하는 데 어려움을 겪는 모든 이들이 진정한 창의적 자아를 전달할 수 있는 기회를 가질 수 있도록 최선을 다하고 있습니다!"
Duet BCI의 미래
Jin 등은 가장 큰 과제가 인공지능으로 라이브 음악을 생성하는 방법을 고안하는 것이었다고 말합니다.
"저희는 원래 이것이 불가능하며 기술이 아직 '거기'까지 도달하지 못했다고 생각했습니다. 인터넷에서도 이와 관련된 내용을 전혀 찾을 수 없었고, EEG를 사용할 수 있는 다른 아이디어로 어떻게 피벗할지 고민하며 몇 시간을 보내기도 했습니다."라고 그들은 말했습니다.
"하지만 저희는 결국 한계를 극복하고 저희가 아는 한 다른 어디에도 존재하지 않는 완전히 새로운 라이브 AI 음악 생성 방법을 고안해 냈습니다."라고 Jin 등은 설명했습니다. "대부분의 팀원들이 이러한 유형의 하드웨어를 다뤄보는 것이 처음이었고, 하드웨어를 컴퓨터에 제대로 연결하는 과정에서 많은 문제에 부딪치기도 했습니다. 하지만 결국 모든 것이 원활하게 작동하도록 만들었습니다. 우리에게는 이 모든 것을 실현해 낸 것이 엄청난 성과였습니다!"
Duet에 대해 더 자세히 알아보고 GitHub에서 코드를 확인하여 직접 시도해 보려면, DevPost의 전체 스토리를 확인해 보세요.
Emotiv의 임직원 일동은 여러분을 진심으로 축하하며, 팀원 여러분이 매우 자랑스럽습니다!
다음 콘텐츠도 관심이 있으실 수 있습니다:
모두를 위한 BCI 혁신
Emotiv는 인류의 발전을 위한 혁신을 자랑스럽게 지원합니다. 귀하의 EEG 또는 BCI 프로젝트를 위해 Emotiv 제품을 얻기 위한 제품 대여, 기부 또는 재정적 지원에 대해 문의하고 싶으시다면, 언제든지 알려주시기 바랍니다.
문의하기
USC Berkeley의 한 재능 있는 학생 그룹이 혁신적인 BCI 음악 프로젝트인 "Duet"으로 Cal Hacks 2024에서 1등상을 차지했습니다.
Duet은 Epoc X 헤드셋과 EmotivPRO 소프트웨어, 그리고 Cortex API를 통해 수집되고 변환된 실시간 감정 상태를 기반으로 AI를 사용하여 음악을 작곡합니다.
학생들은 Duet이 개인 맞춤형 음악 경험을 통해 장애가 있는 아동과 개인들에게 효과적인 음악 치료를 제공할 수 있기를 바라고 있습니다.
Emotiv는 세계 최대 규모의 대학 해커톤인 Cal Hacks 2024에서 1등상을 수상한 USC Berkeley의 Jiahui Jin, Sophia Zhang, Daniel Wang, Justin Wu 학생에게 진심 어린 축하를 전합니다. Jin 등의 BCI 프로젝트인 Duet은 실시간 뇌파 성능 지표를 AI가 생성한 음악과 시각적 피드백으로 변환합니다.
Duet의 영감은 발달 장애 아동에게 음악을 가르치는 데 따르는 어려움을 해결하는 것에서 시작되었습니다.
"안타깝게도 많은 아이들이 소통하고 창의적으로 자신을 표현하는 데 필요한 도구 없이 방치되고 있습니다."라고 팀은 설명합니다. "이것이 바로 Duet이 필요한 이유입니다. EEG 기술을 활용하여 저희는 이러한 아이들이 음악과 상호작용하는 방식을 변화시키고, 이들에게 목소리와 감정을 나눌 수 있는 수단을 제공하고자 합니다."
작동 원리
Duet은 인공지능을 사용하여 뇌파를 읽음으로써 사람의 실시간 감정 상태에 따라 음악을 작곡합니다. 팀은 뇌파 데이터를 스트리밍하기 위해 Epoc X 헤드셋을 사용했으며, Emotiv Cortex API를 탑재한 Python을 통해 이를 처리했습니다. 이들의 노력을 돕기 위해 Emotiv는 학생들이 EEG 하드웨어를 대여할 수 있도록 주선하고 PRO 구독 소프트웨어에 대한 임시 액세스 권한을 부여했습니다.
Emotiv의 독점적인 머신러닝 기술은 뇌 활동을 감정 상태(성능 지표)로 분류하여 음악을 생성하는 Google의 Gemini LLM에 입력했습니다. 정해진 규칙을 따르는 대신, Duet은 감정, 연주 가능한 악기, 그리고 이전 출력 값을 기반으로 다음 몇 초간의 음악을 결정하는 라이브 작곡가 역할을 했습니다.
Sonic Pi가 라이브 음악 재생을 처리했고, SingleStore가 대기 시간이 짧은 데이터를 관리했으며, 저희의 Next.js 프론트엔드가 실시간으로 뇌파와 그에 해당하는 음악을 시각화했다고 팀은 설명했습니다.
"Duet에서 저희는 음악을 모두를 위한 포용적인 경험으로 만들고, 모든 아이들과 자신을 표현하는 데 어려움을 겪는 모든 이들이 진정한 창의적 자아를 전달할 수 있는 기회를 가질 수 있도록 최선을 다하고 있습니다!"
Duet BCI의 미래
Jin 등은 가장 큰 과제가 인공지능으로 라이브 음악을 생성하는 방법을 고안하는 것이었다고 말합니다.
"저희는 원래 이것이 불가능하며 기술이 아직 '거기'까지 도달하지 못했다고 생각했습니다. 인터넷에서도 이와 관련된 내용을 전혀 찾을 수 없었고, EEG를 사용할 수 있는 다른 아이디어로 어떻게 피벗할지 고민하며 몇 시간을 보내기도 했습니다."라고 그들은 말했습니다.
"하지만 저희는 결국 한계를 극복하고 저희가 아는 한 다른 어디에도 존재하지 않는 완전히 새로운 라이브 AI 음악 생성 방법을 고안해 냈습니다."라고 Jin 등은 설명했습니다. "대부분의 팀원들이 이러한 유형의 하드웨어를 다뤄보는 것이 처음이었고, 하드웨어를 컴퓨터에 제대로 연결하는 과정에서 많은 문제에 부딪치기도 했습니다. 하지만 결국 모든 것이 원활하게 작동하도록 만들었습니다. 우리에게는 이 모든 것을 실현해 낸 것이 엄청난 성과였습니다!"
Duet에 대해 더 자세히 알아보고 GitHub에서 코드를 확인하여 직접 시도해 보려면, DevPost의 전체 스토리를 확인해 보세요.
Emotiv의 임직원 일동은 여러분을 진심으로 축하하며, 팀원 여러분이 매우 자랑스럽습니다!
다음 콘텐츠도 관심이 있으실 수 있습니다:
모두를 위한 BCI 혁신
Emotiv는 인류의 발전을 위한 혁신을 자랑스럽게 지원합니다. 귀하의 EEG 또는 BCI 프로젝트를 위해 Emotiv 제품을 얻기 위한 제품 대여, 기부 또는 재정적 지원에 대해 문의하고 싶으시다면, 언제든지 알려주시기 바랍니다.
문의하기
USC Berkeley의 한 재능 있는 학생 그룹이 혁신적인 BCI 음악 프로젝트인 "Duet"으로 Cal Hacks 2024에서 1등상을 차지했습니다.
Duet은 Epoc X 헤드셋과 EmotivPRO 소프트웨어, 그리고 Cortex API를 통해 수집되고 변환된 실시간 감정 상태를 기반으로 AI를 사용하여 음악을 작곡합니다.
학생들은 Duet이 개인 맞춤형 음악 경험을 통해 장애가 있는 아동과 개인들에게 효과적인 음악 치료를 제공할 수 있기를 바라고 있습니다.
Emotiv는 세계 최대 규모의 대학 해커톤인 Cal Hacks 2024에서 1등상을 수상한 USC Berkeley의 Jiahui Jin, Sophia Zhang, Daniel Wang, Justin Wu 학생에게 진심 어린 축하를 전합니다. Jin 등의 BCI 프로젝트인 Duet은 실시간 뇌파 성능 지표를 AI가 생성한 음악과 시각적 피드백으로 변환합니다.
Duet의 영감은 발달 장애 아동에게 음악을 가르치는 데 따르는 어려움을 해결하는 것에서 시작되었습니다.
"안타깝게도 많은 아이들이 소통하고 창의적으로 자신을 표현하는 데 필요한 도구 없이 방치되고 있습니다."라고 팀은 설명합니다. "이것이 바로 Duet이 필요한 이유입니다. EEG 기술을 활용하여 저희는 이러한 아이들이 음악과 상호작용하는 방식을 변화시키고, 이들에게 목소리와 감정을 나눌 수 있는 수단을 제공하고자 합니다."
작동 원리
Duet은 인공지능을 사용하여 뇌파를 읽음으로써 사람의 실시간 감정 상태에 따라 음악을 작곡합니다. 팀은 뇌파 데이터를 스트리밍하기 위해 Epoc X 헤드셋을 사용했으며, Emotiv Cortex API를 탑재한 Python을 통해 이를 처리했습니다. 이들의 노력을 돕기 위해 Emotiv는 학생들이 EEG 하드웨어를 대여할 수 있도록 주선하고 PRO 구독 소프트웨어에 대한 임시 액세스 권한을 부여했습니다.
Emotiv의 독점적인 머신러닝 기술은 뇌 활동을 감정 상태(성능 지표)로 분류하여 음악을 생성하는 Google의 Gemini LLM에 입력했습니다. 정해진 규칙을 따르는 대신, Duet은 감정, 연주 가능한 악기, 그리고 이전 출력 값을 기반으로 다음 몇 초간의 음악을 결정하는 라이브 작곡가 역할을 했습니다.
Sonic Pi가 라이브 음악 재생을 처리했고, SingleStore가 대기 시간이 짧은 데이터를 관리했으며, 저희의 Next.js 프론트엔드가 실시간으로 뇌파와 그에 해당하는 음악을 시각화했다고 팀은 설명했습니다.
"Duet에서 저희는 음악을 모두를 위한 포용적인 경험으로 만들고, 모든 아이들과 자신을 표현하는 데 어려움을 겪는 모든 이들이 진정한 창의적 자아를 전달할 수 있는 기회를 가질 수 있도록 최선을 다하고 있습니다!"
Duet BCI의 미래
Jin 등은 가장 큰 과제가 인공지능으로 라이브 음악을 생성하는 방법을 고안하는 것이었다고 말합니다.
"저희는 원래 이것이 불가능하며 기술이 아직 '거기'까지 도달하지 못했다고 생각했습니다. 인터넷에서도 이와 관련된 내용을 전혀 찾을 수 없었고, EEG를 사용할 수 있는 다른 아이디어로 어떻게 피벗할지 고민하며 몇 시간을 보내기도 했습니다."라고 그들은 말했습니다.
"하지만 저희는 결국 한계를 극복하고 저희가 아는 한 다른 어디에도 존재하지 않는 완전히 새로운 라이브 AI 음악 생성 방법을 고안해 냈습니다."라고 Jin 등은 설명했습니다. "대부분의 팀원들이 이러한 유형의 하드웨어를 다뤄보는 것이 처음이었고, 하드웨어를 컴퓨터에 제대로 연결하는 과정에서 많은 문제에 부딪치기도 했습니다. 하지만 결국 모든 것이 원활하게 작동하도록 만들었습니다. 우리에게는 이 모든 것을 실현해 낸 것이 엄청난 성과였습니다!"
Duet에 대해 더 자세히 알아보고 GitHub에서 코드를 확인하여 직접 시도해 보려면, DevPost의 전체 스토리를 확인해 보세요.
Emotiv의 임직원 일동은 여러분을 진심으로 축하하며, 팀원 여러분이 매우 자랑스럽습니다!
다음 콘텐츠도 관심이 있으실 수 있습니다:
모두를 위한 BCI 혁신
Emotiv는 인류의 발전을 위한 혁신을 자랑스럽게 지원합니다. 귀하의 EEG 또는 BCI 프로젝트를 위해 Emotiv 제품을 얻기 위한 제품 대여, 기부 또는 재정적 지원에 대해 문의하고 싶으시다면, 언제든지 알려주시기 바랍니다.
문의하기
계속 읽기