• Sekelompok mahasiswa berbakat di USC Berkley meraih juara pertama di Cal Hacks 2024 untuk proyek musik BCI inovatif mereka, "Duet."

• Duet menggunakan AI untuk menggubah musik berdasarkan keadaan emosional secara waktu nyata yang dikumpulkan dan diterjemahkan oleh headset Emotiv EPOC X dan perangkat lunak EmotivPRO dengan Cortex API.

• Para mahasiswa berharap Duet akan menawarkan terapi musik yang efektif bagi anak-anak dan individu dengan disabilitas melalui pengalaman musikal yang dipersonalisasi.

Emotiv menyampaikan ucapan selamat yang tulus kepada mahasiswa USC Berkley Jiahui Jin, Sophia Zhang, Daniel Wang, dan Justin Wu atas kemenangan mereka meraih juara pertama di Cal Hacks 2024, hackathon tingkat perguruan tinggi terbesar di dunia. Proyek BCI Jin dkk., Duet, menerjemahkan metrik performa gelombang otak waktu nyata menjadi musik yang dihasilkan AI dan umpan balik visual.

Inspirasi di balik Duet adalah untuk mengatasi tantangan mengajar musik kepada anak-anak dengan disabilitas perkembangan.

"Sayangnya, banyak anak tidak memiliki alat yang mereka butuhkan untuk berkomunikasi dan mengekspresikan diri secara kreatif," jelas tim. "Di situlah Duet berperan. Dengan memanfaatkan teknologi EEG, kami bertujuan mengubah cara anak-anak ini berinteraksi dengan musik, memberi mereka suara dan sarana untuk membagikan perasaan mereka."

Cara Kerjanya

Duet menggunakan kecerdasan buatan untuk menggubah musik berdasarkan keadaan emosional seseorang secara waktu nyata dengan membaca gelombang otak. Tim menggunakan headset Emotiv EPOC X untuk menyalurkan data gelombang otak dan memprosesnya melalui Python dengan Emotiv Cortex API. Untuk membantu upaya mereka, Emotiv mengatur agar para mahasiswa dapat meminjam perangkat keras EEG dan memberikan akses sementara ke perangkat lunak langganan PRO.

Pembelajaran mesin milik Emotiv mengklasifikasikan aktivitas otak ke dalam keadaan emosional (metrik performa), lalu memasukkannya ke Gemini LLM milik Google untuk menghasilkan musik. Alih-alih mengikuti aturan tetap, Duet bertindak sebagai komposer langsung, menentukan beberapa detik musik berikutnya berdasarkan emosi, instrumen yang tersedia, dan keluaran sebelumnya.

Sonic Pi menangani pemutaran musik langsung, SingleStore mengelola data latensi rendah, dan frontend Next.js kami memvisualisasikan gelombang otak serta musik yang sesuai secara waktu nyata, jelas tim.

"Di Duet, kami berkomitmen menjadikan musik sebagai pengalaman inklusif bagi semua orang, memastikan bahwa setiap anak—dan siapa pun yang kesulitan mengekspresikan diri—memiliki kesempatan untuk menyampaikan jati diri kreatif mereka yang sebenarnya!"

Masa Depan Duet BCI

Jin dkk. mengatakan tantangan terbesar mereka adalah menemukan cara untuk menghasilkan musik langsung dengan kecerdasan buatan.

"Awalnya kami mengira itu mustahil dan teknologinya belum 'siap' yet — kami tidak dapat menemukan apa pun secara online tentang hal itu, dan bahkan menghabiskan berjam-jam memikirkan bagaimana beralih ke ide lain yang bisa kami gunakan dengan EEG kami," kata mereka.

"Namun, kami akhirnya terus maju dan menemukan metode yang sepenuhnya baru untuk melakukan generasi musik AI langsung yang, sepanjang pengetahuan kami, tidak ada di tempat lain," jelas Jin dkk. "Bagi sebagian besar dari kami, ini adalah pertama kalinya bekerja dengan jenis perangkat keras ini, dan kami menghadapi banyak masalah saat menghubungkannya dengan benar ke komputer kami — tetapi pada akhirnya, semuanya berjalan lancar, jadi pencapaian ini sangat besar bagi kami karena berhasil membuat semuanya berfungsi!"

Untuk mempelajari lebih lanjut tentang Duet dan melihat kode di GitHub untuk mencobanya sendiri, lihat kisah lengkapnya di DevPost.

Dari kami semua di Emotiv - selamat, tim, kami sangat bangga pada kalian!

Anda mungkin juga menyukai:

• Program BCI Ini Menghubungkan Anak-Anak dengan Disabilitas ke Dunia Mereka

• Terapi Neurofeedback Musik untuk Mengatasi Depresi pada Lansia

• Antarmuka Otak-Komputer Musik: Cara Mengontrol Spotify dengan Pikiran Anda

Inovasi BCI untuk Semua

Emotiv dengan bangga mendukung inovasi demi kebaikan umat manusia. Jika Anda ingin menanyakan pinjaman produk, donasi, atau bantuan finansial untuk mendapatkan produk Emotiv untuk proyek EEG atau BCI Anda, kami akan senang mendengar dari Anda.

Hubungi Kami