• USC Berkley'den yetenekli bir grup öğrenci, yenilikçi BCI müzik projeleri "Duet" ile Cal Hacks 2024'te birincilik ödülünü kazandı.

• Duet, bir Emotiv Epoc X başlığı ve Cortex API'li EmotivPRO yazılımı tarafından toplanan ve aktarılan gerçek zamanlı duygusal durumlara dayanarak müzik bestelemek için yapay zeka kullanıyor.

• Öğrenciler, Duet'in kişiselleştirilmiş müzik deneyimleri aracılığıyla engelli çocuklar ve bireyler için etkili bir müzik terapisi sunmasını umuyor.

Emotiv, dünyanın en büyük üniversiteler arası hackathonu olan Cal Hacks 2024'te birincilik ödülünü kazanan USC Berkley öğrencileri Jiahui Jin, Sophia Zhang, Daniel Wang ve Justin Wu'yu yürekten tebrik eder. Jin ve arkadaşlarının BCI projesi Duet, gerçek zamanlı beyin dalgası performans metriklerini yapay zeka tarafından oluşturulan müzik ve görsel geri bildirime dönüştürüyor.

Duet'in ilham kaynağı, gelişimsel engeli olan çocuklara müzik öğretmenin getirdiği zorlukları aşmaktı.

Ekip, "Maalesef birçok çocuk iletişim kurmak ve kendilerini yaratıcı bir şekilde ifade etmek için ihtiyaç duydukları araçlardan yoksun kalıyor," diye açıklıyor. "İşte Duet tam bu noktada devreye giriyor. EEG teknolojisini kullanarak bu çocukların müzikle etkileşim kurma biçimini dönüştürmeyi, onlara bir ses ve duygularını paylaşmaları için bir yol sunmayı amaçlıyoruz."

Nasıl Çalışır

Duet, beyin dalgalarını okuyarak bir kişinin gerçek zamanlı duygusal durumlarına dayalı müzik bestelemek için yapay zeka kullanır. Ekip, beyin dalgası verilerini aktarmak için Emotiv Epoc X başlıkları kullandı ve bunları Emotiv Cortex API ile Python üzerinden işledi. Bu çabalarında onlara yardımcı olmak için Emotiv, öğrencilerin EEG donanımını ödünç almalarını sağladı ve PRO abonelik yazılımına geçici erişim hakkı tanıdı.

Emotiv'in tescilli yapay öğrenmesi beyin aktivitesini duygusal durumlara (performans metrikleri) göre sınıflandırdı ve müzik üretmek üzere Google'ın Gemini LLM modeline besledi. Sabit kuralları takip etmek yerine Duet, duygulara, mevcut enstrümanlara ve önceki çıktılara dayanarak müziğin sonraki birkaç saniyesine karar veren canlı bir besteci gibi hareket etti.

Ekip, Sonic Pi'nin canlı müzik çalmayı yönettiğini, SingleStore'un düşük gecikmeli verileri idare ettiğini ve Next.js frontend'imizin hem beyin dalgalarını hem de karşılık gelen müziği gerçek zamanlı olarak görselleştirdiğini açıkladı.

"Duet'te müziği herkes için kapsayıcı bir deneyim haline getirmeye kararlıyız; her çocuğun ve kendini ifade etmekte zorlanan herkesin içindeki gerçek yaratıcı benliğini ortaya koyması için fırsat sunuyoruz!"

Duet BCI'ın Geleceği

Jin ve arkadaşları, en büyük zorluklarının yapay zeka ile canlı müzik üretmenin bir yolunu bulmak olduğunu söylüyor.

"Başlangıçta bunun imkansız olduğunu ve teknolojinin henüz o seviyede olmadığını düşünmüştük; internette buna dair hiçbir şey bulamadık, hatta EEG'lerimizi kullanabileceğimiz başka bir fikre nasıl yönelebileceğimizi saatlerce düşündük," dediler.

Jin ve arkadaşları, "Ancak en sonunda bunu başardık ve bildiğimiz kadarıyla başka hiçbir yerde var olmayan, canlı yapay zeka müzik üretimine yönelik tamamen yeni bir yöntem geliştirdik," diye açıkladı. "Bu tür bir donanımla çoğumuzun ilk çalışışıydı ve bilgisayarlarımıza düzgün bir şekilde bağlama konusunda birçok sorunla karşılaştık; ama sonunda her şeyi sorunsuz bir şekilde çalıştırmayı başardık, dolayısıyla tüm bunları gerçekleştirmek bizim için büyük bir başarı oldu!"

Duet hakkında daha fazla bilgi edinmek ve projeyi kendiniz denemek üzere GitHub'daki kodları incelemek için DevPost'taki hikayenin tamamına göz atın.

Tüm Emotiv ailesi olarak, tebrikler ekip, sizinle gurur duyuyoruz!

İlginizi çekebilir:

• Bu BCI Programı Engelli Çocukları Dünyalarına Bağlıyor

• Yaşlılık Depresyonu Tedavisinde Müzik Nörogeribildirim Terapisi

• Müzik Beyin Bilgisayar Arayüzü: Spotify Zihin Gücüyle Nasıl Kontrol Edilir?

Herkes İçin BCI İnovasyonu

Emotiv, insanlığın iyiliği için yapılan inovasyonları gururla desteklemektedir. EEG veya BCI projeniz için Emotiv ürünlerini temin etmek üzere ürün ödünç alma, bağışlar veya finansal destek hakkında bilgi almak isterseniz, sizinle iletişime geçmekten mutluluk duyarız.

Bize Ulaşın