Podejmij wyzwanie dla swojej pamięci! Zagraj w nową grę N-Back w aplikacji Emotiv
Podejmij wyzwanie dla swojej pamięci! Zagraj w nową grę N-Back w aplikacji Emotiv
Podejmij wyzwanie dla swojej pamięci! Zagraj w nową grę N-Back w aplikacji Emotiv
Duet: Projekt Muzyki Fal Mózgowych BCI wygrywa Cal Hacks 2024
Heidi Duran
21 paź 2024
Udostępnij:
Utalentowana grupa studentów z USC Berkley zdobyła pierwszą nagrodę na Cal Hacks 2024 za swój innowacyjny projekt muzyczny BCI, "Duet."
Duet wykorzystuje AI do komponowania muzyki na podstawie emocjonalnych stanów w czasie rzeczywistym, zbieranych i tłumaczonych przez zestaw słuchawkowy Emotiv EPOC X oraz oprogramowanie EmotivPRO z użyciem API Cortex.
Studenci mają nadzieję, że Duet zaoferuje skuteczną terapię muzyczną dla dzieci i osób z niepełnosprawnościami poprzez spersonalizowane doświadczenia muzyczne.
Emotiv składa serdeczne gratulacje studentom USC Berkley: Jiahui Jin, Sophia Zhang, Daniel Wang i Justin Wu za zdobycie pierwszej nagrody na Cal Hacks 2024, największym studenckim hackathonie na świecie. Projekt BCI Jin i innych, Duet, tłumaczy rzeczywiste wskaźniki wydajności fal mózgowych na muzykę generowaną przez AI oraz wizualfeedback.
Inspiracją dla Duet było sprostanie wyzwaniom nauczania muzyki dzieci z niepełnosprawnościami rozwojowymi.
"Niestety, wiele dzieci zostaje bez narzędzi, których potrzebują, aby komunikować się i wyrażać siebie twórczo," wyjaśnia zespół . "Tutaj wkracza Duet. Poprzez wykorzystanie technologii EEG, chcemy zmienić sposób, w jaki te dzieci współdziałają z muzyką, dając im głos i środki do dzielenia się swoimi uczuciami."
Jak to działa
Duet wykorzystuje sztuczną inteligencję do komponowania muzyki na podstawie rzeczywistych stanów emocjonalnych osoby, odczytując fale mózgowe. Zespół korzystał z zestawów słuchawkowych Emotiv EPOC X, aby przesyłać dane o falach mózgowych i przetwarzał je w Pythonie za pomocą API Emotiv Cortex. Aby wesprzeć ich działania, Emotiv zorganizował wypożyczenie sprzętu EEG dla studentów i przyznał tymczasowy dostęp do swojego oprogramowania PRO.
Własna technologia uczenia maszynowego Emotiv klasyfikowała aktywność mózgu na stany emocjonalne (wskaźniki wydajności), które były przetwarzane przez model Gemini LLM Google’a do generacji muzyki. Zamiast podążać za ustalonymi zasadami, Duet działał jako żywy kompozytor, decydując o kolejnych sekundach muzyki na podstawie emocji, dostępnych instrumentów i wcześniejszych wyjść.
Sonic Pi obsługiwał odtwarzanie muzyki na żywo, SingleStore zarządzał danymi o niskiej latencji, a nasza frontendowa aplikacja Next.js wizualizowała zarówno fale mózgowe, jak i odpowiadającą im muzykę w czasie rzeczywistym, wyjaśnił zespół.
"W Duet zobowiązujemy się do uczynienia muzyki doświadczeniem dostępnym dla wszystkich, zapewniając, że każde dziecko — oraz każdy, kto ma trudności w wyrażaniu siebie — ma szansę na wyrażenie swojego prawdziwego, twórczego ja!"
Przyszłość Duet BCI
Jin i inni twierdzą, że ich największym wyzwaniem było wymyślenie sposobu na generowanie muzyki na żywo przy użyciu sztucznej inteligencji.
"Początkowo myśleliśmy, że to niemożliwe i że technologia jeszcze nie jest "na swoim miejscu" — nie mogliśmy znaleźć niczego na ten temat w internecie i nawet spędziliśmy godziny na myśleniu o tym, jak zmienić pomysł na inny, do którego moglibyśmy wykorzystać nasze EEG," powiedzieli.
"Jednak ostatecznie pchnęliśmy do przodu i wymyśliliśmy zupełnie nową metodę generacji muzyki AI na żywo, która, o ile nam wiadomo, nie istnieje nigdzie indziej," wyjaśnił Jin i inni. "To była większa część naszych pierwszych doświadczeń pracy z tego rodzaju sprzętem i napotkaliśmy wiele problemów z właściwym podłączeniem go do naszych komputerów — ale w końcu wszystko udało się uruchomić płynnie, więc to było ogromne osiągnięcie dla nas, żeby to wszystko zadziałało!"
Aby dowiedzieć się więcej o Duet i zobaczyć kod na GitHubie, aby spróbować go samodzielnie, sprawdź pełną historię na DevPost.
Od nas wszystkich w Emotiv - gratulacje, zespole, jesteśmy z was bardzo dumni!
Mogą cię również zainteresować:
Ten program BCI łączy dzieci z niepełnosprawnościami z ich światem
Muzyczna terapia neurofeedback dla leczenia depresji seniorów
Muzyczny interfejs komputerowy: jak kontrolować Spotify swoim umysłem
Innowacja BCI dla wszystkich
Emotiv z dumą wspiera innowacje na rzecz poprawy ludzkości. Jeśli chcesz zapytać o wypożyczanie produktów, darowizny lub wsparcie finansowe na uzyskanie produktów Emotiv do swojego projektu EEG lub BCI, chętnie usłyszymy od ciebie.
Skontaktuj się z nami
Utalentowana grupa studentów z USC Berkley zdobyła pierwszą nagrodę na Cal Hacks 2024 za swój innowacyjny projekt muzyczny BCI, "Duet."
Duet wykorzystuje AI do komponowania muzyki na podstawie emocjonalnych stanów w czasie rzeczywistym, zbieranych i tłumaczonych przez zestaw słuchawkowy Emotiv EPOC X oraz oprogramowanie EmotivPRO z użyciem API Cortex.
Studenci mają nadzieję, że Duet zaoferuje skuteczną terapię muzyczną dla dzieci i osób z niepełnosprawnościami poprzez spersonalizowane doświadczenia muzyczne.
Emotiv składa serdeczne gratulacje studentom USC Berkley: Jiahui Jin, Sophia Zhang, Daniel Wang i Justin Wu za zdobycie pierwszej nagrody na Cal Hacks 2024, największym studenckim hackathonie na świecie. Projekt BCI Jin i innych, Duet, tłumaczy rzeczywiste wskaźniki wydajności fal mózgowych na muzykę generowaną przez AI oraz wizualfeedback.
Inspiracją dla Duet było sprostanie wyzwaniom nauczania muzyki dzieci z niepełnosprawnościami rozwojowymi.
"Niestety, wiele dzieci zostaje bez narzędzi, których potrzebują, aby komunikować się i wyrażać siebie twórczo," wyjaśnia zespół . "Tutaj wkracza Duet. Poprzez wykorzystanie technologii EEG, chcemy zmienić sposób, w jaki te dzieci współdziałają z muzyką, dając im głos i środki do dzielenia się swoimi uczuciami."
Jak to działa
Duet wykorzystuje sztuczną inteligencję do komponowania muzyki na podstawie rzeczywistych stanów emocjonalnych osoby, odczytując fale mózgowe. Zespół korzystał z zestawów słuchawkowych Emotiv EPOC X, aby przesyłać dane o falach mózgowych i przetwarzał je w Pythonie za pomocą API Emotiv Cortex. Aby wesprzeć ich działania, Emotiv zorganizował wypożyczenie sprzętu EEG dla studentów i przyznał tymczasowy dostęp do swojego oprogramowania PRO.
Własna technologia uczenia maszynowego Emotiv klasyfikowała aktywność mózgu na stany emocjonalne (wskaźniki wydajności), które były przetwarzane przez model Gemini LLM Google’a do generacji muzyki. Zamiast podążać za ustalonymi zasadami, Duet działał jako żywy kompozytor, decydując o kolejnych sekundach muzyki na podstawie emocji, dostępnych instrumentów i wcześniejszych wyjść.
Sonic Pi obsługiwał odtwarzanie muzyki na żywo, SingleStore zarządzał danymi o niskiej latencji, a nasza frontendowa aplikacja Next.js wizualizowała zarówno fale mózgowe, jak i odpowiadającą im muzykę w czasie rzeczywistym, wyjaśnił zespół.
"W Duet zobowiązujemy się do uczynienia muzyki doświadczeniem dostępnym dla wszystkich, zapewniając, że każde dziecko — oraz każdy, kto ma trudności w wyrażaniu siebie — ma szansę na wyrażenie swojego prawdziwego, twórczego ja!"
Przyszłość Duet BCI
Jin i inni twierdzą, że ich największym wyzwaniem było wymyślenie sposobu na generowanie muzyki na żywo przy użyciu sztucznej inteligencji.
"Początkowo myśleliśmy, że to niemożliwe i że technologia jeszcze nie jest "na swoim miejscu" — nie mogliśmy znaleźć niczego na ten temat w internecie i nawet spędziliśmy godziny na myśleniu o tym, jak zmienić pomysł na inny, do którego moglibyśmy wykorzystać nasze EEG," powiedzieli.
"Jednak ostatecznie pchnęliśmy do przodu i wymyśliliśmy zupełnie nową metodę generacji muzyki AI na żywo, która, o ile nam wiadomo, nie istnieje nigdzie indziej," wyjaśnił Jin i inni. "To była większa część naszych pierwszych doświadczeń pracy z tego rodzaju sprzętem i napotkaliśmy wiele problemów z właściwym podłączeniem go do naszych komputerów — ale w końcu wszystko udało się uruchomić płynnie, więc to było ogromne osiągnięcie dla nas, żeby to wszystko zadziałało!"
Aby dowiedzieć się więcej o Duet i zobaczyć kod na GitHubie, aby spróbować go samodzielnie, sprawdź pełną historię na DevPost.
Od nas wszystkich w Emotiv - gratulacje, zespole, jesteśmy z was bardzo dumni!
Mogą cię również zainteresować:
Ten program BCI łączy dzieci z niepełnosprawnościami z ich światem
Muzyczna terapia neurofeedback dla leczenia depresji seniorów
Muzyczny interfejs komputerowy: jak kontrolować Spotify swoim umysłem
Innowacja BCI dla wszystkich
Emotiv z dumą wspiera innowacje na rzecz poprawy ludzkości. Jeśli chcesz zapytać o wypożyczanie produktów, darowizny lub wsparcie finansowe na uzyskanie produktów Emotiv do swojego projektu EEG lub BCI, chętnie usłyszymy od ciebie.
Skontaktuj się z nami
Utalentowana grupa studentów z USC Berkley zdobyła pierwszą nagrodę na Cal Hacks 2024 za swój innowacyjny projekt muzyczny BCI, "Duet."
Duet wykorzystuje AI do komponowania muzyki na podstawie emocjonalnych stanów w czasie rzeczywistym, zbieranych i tłumaczonych przez zestaw słuchawkowy Emotiv EPOC X oraz oprogramowanie EmotivPRO z użyciem API Cortex.
Studenci mają nadzieję, że Duet zaoferuje skuteczną terapię muzyczną dla dzieci i osób z niepełnosprawnościami poprzez spersonalizowane doświadczenia muzyczne.
Emotiv składa serdeczne gratulacje studentom USC Berkley: Jiahui Jin, Sophia Zhang, Daniel Wang i Justin Wu za zdobycie pierwszej nagrody na Cal Hacks 2024, największym studenckim hackathonie na świecie. Projekt BCI Jin i innych, Duet, tłumaczy rzeczywiste wskaźniki wydajności fal mózgowych na muzykę generowaną przez AI oraz wizualfeedback.
Inspiracją dla Duet było sprostanie wyzwaniom nauczania muzyki dzieci z niepełnosprawnościami rozwojowymi.
"Niestety, wiele dzieci zostaje bez narzędzi, których potrzebują, aby komunikować się i wyrażać siebie twórczo," wyjaśnia zespół . "Tutaj wkracza Duet. Poprzez wykorzystanie technologii EEG, chcemy zmienić sposób, w jaki te dzieci współdziałają z muzyką, dając im głos i środki do dzielenia się swoimi uczuciami."
Jak to działa
Duet wykorzystuje sztuczną inteligencję do komponowania muzyki na podstawie rzeczywistych stanów emocjonalnych osoby, odczytując fale mózgowe. Zespół korzystał z zestawów słuchawkowych Emotiv EPOC X, aby przesyłać dane o falach mózgowych i przetwarzał je w Pythonie za pomocą API Emotiv Cortex. Aby wesprzeć ich działania, Emotiv zorganizował wypożyczenie sprzętu EEG dla studentów i przyznał tymczasowy dostęp do swojego oprogramowania PRO.
Własna technologia uczenia maszynowego Emotiv klasyfikowała aktywność mózgu na stany emocjonalne (wskaźniki wydajności), które były przetwarzane przez model Gemini LLM Google’a do generacji muzyki. Zamiast podążać za ustalonymi zasadami, Duet działał jako żywy kompozytor, decydując o kolejnych sekundach muzyki na podstawie emocji, dostępnych instrumentów i wcześniejszych wyjść.
Sonic Pi obsługiwał odtwarzanie muzyki na żywo, SingleStore zarządzał danymi o niskiej latencji, a nasza frontendowa aplikacja Next.js wizualizowała zarówno fale mózgowe, jak i odpowiadającą im muzykę w czasie rzeczywistym, wyjaśnił zespół.
"W Duet zobowiązujemy się do uczynienia muzyki doświadczeniem dostępnym dla wszystkich, zapewniając, że każde dziecko — oraz każdy, kto ma trudności w wyrażaniu siebie — ma szansę na wyrażenie swojego prawdziwego, twórczego ja!"
Przyszłość Duet BCI
Jin i inni twierdzą, że ich największym wyzwaniem było wymyślenie sposobu na generowanie muzyki na żywo przy użyciu sztucznej inteligencji.
"Początkowo myśleliśmy, że to niemożliwe i że technologia jeszcze nie jest "na swoim miejscu" — nie mogliśmy znaleźć niczego na ten temat w internecie i nawet spędziliśmy godziny na myśleniu o tym, jak zmienić pomysł na inny, do którego moglibyśmy wykorzystać nasze EEG," powiedzieli.
"Jednak ostatecznie pchnęliśmy do przodu i wymyśliliśmy zupełnie nową metodę generacji muzyki AI na żywo, która, o ile nam wiadomo, nie istnieje nigdzie indziej," wyjaśnił Jin i inni. "To była większa część naszych pierwszych doświadczeń pracy z tego rodzaju sprzętem i napotkaliśmy wiele problemów z właściwym podłączeniem go do naszych komputerów — ale w końcu wszystko udało się uruchomić płynnie, więc to było ogromne osiągnięcie dla nas, żeby to wszystko zadziałało!"
Aby dowiedzieć się więcej o Duet i zobaczyć kod na GitHubie, aby spróbować go samodzielnie, sprawdź pełną historię na DevPost.
Od nas wszystkich w Emotiv - gratulacje, zespole, jesteśmy z was bardzo dumni!
Mogą cię również zainteresować:
Ten program BCI łączy dzieci z niepełnosprawnościami z ich światem
Muzyczna terapia neurofeedback dla leczenia depresji seniorów
Muzyczny interfejs komputerowy: jak kontrolować Spotify swoim umysłem
Innowacja BCI dla wszystkich
Emotiv z dumą wspiera innowacje na rzecz poprawy ludzkości. Jeśli chcesz zapytać o wypożyczanie produktów, darowizny lub wsparcie finansowe na uzyskanie produktów Emotiv do swojego projektu EEG lub BCI, chętnie usłyszymy od ciebie.
