Düet: Beyin Dalgaları Müzik BCI Projesi Cal Hacks 2024'ü Kazandı

• USC Berkley'deki yetenekli bir öğrenci grubu, yenilikçi BCI müzik projeleri "Duet" ile Cal Hacks 2024'te birincilik ödülünü kazandı.

• Duet, bir Emotiv EPOC X kulaklığı ve EmotivPRO yazılımı aracılığıyla toplanan ve tercüme edilen gerçek zamanlı duygusal durumlara dayalı müzik bestelemek için AI kullanıyor.

• Öğrenciler, Duet'in çocuklar ve engelli bireyler için kişiselleştirilmiş müzikal deneyimlerle etkili müzik terapisi sunacağını umuyor.

Emotiv, Cal Hacks 2024'te birincilik ödülünü kazanan USC Berkley öğrencileri Jiahui Jin, Sophia Zhang, Daniel Wang ve Justin Wu'yu içtenlikle tebrik eder. Jin ve arkadaşlarının BCI projesi Duet, gerçek zamanlı beyin dalgası performans ölçümlerini AI ile üretilen müziğe ve görsel geri bildirime dönüştürüyor.

Duet'in ilham kaynağı, gelişimsel engelleri olan çocuklara müzik öğretme zorluklarını aşmaktı.

"Maalesef, birçok çocuk kendilerini yaratıcı bir şekilde ifade etmek ve iletişim kurmak için ihtiyaç duydukları araçlardan yoksun kalıyor," takım açıklıyor. "İşte burada Duet devreye giriyor. EEG teknolojisini kullanarak, bu çocukların müzikle etkileşim biçimlerini dönüştürmeyi, onlara bir ses vermeyi ve duygularını paylaşma imkanı sağlamayı hedefliyoruz."

Nasıl Çalışır

Duet, zihin dalgalarını okuyarak bir kişinin gerçek zamanlı duygusal durumlarına dayalı müzik bestelemek için yapay zeka kullanıyor. Ekip, beyin dalgası verilerini akıtmak için Emotiv EPOC X kulaklıkları kullandı ve bu verileri Emotiv Cortex API ile Python üzerinden işledi. Çabalarına yardımcı olmak için Emotiv, öğrenim görenlerin EEG donanımını ödünç almasını sağladı ve PRO aboneliği yazılımına geçici erişim sağladı.

Emotiv'in özel makine öğrenimi, beyin aktivitesini duygusal durumlar (performans metrikleri) olarak sınıflandırdı ve bunu müzik oluşturmak için Google'ın Gemini LLM'sine besledi. Sabit kurallara uymak yerine, Duet canlı bir besteci olarak hareket etti ve müziğin sonraki birkaç saniyesini duygular, mevcut enstrümanlar ve önceki çıktılar doğrultusunda belirledi.

Sonic Pi, canlı müzik çalmayı sağladı, SingleStore düşük gecikmeli veriyi yönetirken, Next.js ön yüzümüz beyin dalgalarını ve ilgili müziği gerçek zamanlı olarak görselleştirdi, ekip açıkladı.

"Duet'te, müziği herkes için kapsayıcı bir deneyim haline getirmeye kararlıyız, her çocuğun - ve kendini ifade etmekte zorluk çeken herkesin - gerçek yaratıcı kimliğini aktarma fırsatına sahip olmasını sağlıyoruz!"

Duet BCI'nin Geleceği

Jin ve arkadaşları, en büyük zorluklarının yapay zeka ile canlı müzik üretmek için bir yol bulmak olduğunu söylüyorlar.

"Aslında bunun imkansız olduğunu ve teknolojinin daha henüz “orada” olmadığını düşündük - bununla ilgili internette hiçbir şey bulamadık ve EEG'lerimizi kullanabileceğimiz başka bir fikre geçmek için saatlerce düşündük," dediler.

"Ancak, sonunda zorladık ve bizimle birlikte var olmayan, tamamen yeni bir canlı yapay zeka müzik üretim yöntemi geliştirdik," Jin ve arkadaşları açıkladı. "Bu tür bir donanımla çalışmak çoğumuzun ilk deneyimiydi ve bilgisayarlarımıza doğru şekilde bağlanmakta birçok sorunla karşılaştık - ama sonuç olarak, her şeyin düzgün çalışmasını sağladık, bu yüzden bu başarı bizim için büyük bir başarıydı!"

Duet hakkında daha fazla bilgi edinmek ve denemek için GitHub'daki kodu görmek için, DevPost'taki tam hikayeyi inceleyin.

Emotiv'teki herkes - tebrikler, takım, sizlerle gurur duyuyoruz!

Ayrıca hoşunuza gidebilir:

• Bu BCI Programı Engelli Çocukları Dünyalarıyla Bağlarken

• Yaşlı Depresyonunu Tedavi Etmek İçin Müzik Nörofedback Terapisi

• Müzik Beyin Bilgisayar Arayüzü: Zihinle Spotify'ı Kontrol Etme

Herkes İçin BCI Yeniliği

Emotiv, insanlık yararına yeniliği desteklemekle gurur duyar. Emotiv ürünlerini EEG veya BCI projeniz için ödünç alma, bağış veya finansal destek almak isterseniz, sizden haber almak isteriz.

Bize Ulaşın