• فازت مجموعة موهوبة من الطلاب في جامعة يو إس سي بيركلي بالجائزة الأولى في هكاثون Cal Hacks 2024 عن مشروعهم المبتكر للموسيقى القائم على تقنية BCI، والذي يحمل اسم "Duet".

• يستخدم مشروع Duet الذكاء الاصطناعي لتأليف الموسيقى بناءً على الحالات العاطفية في الوقت الفعلي والتي يتم جمعها وترجمتها بواسطة سماعة رأس Emotiv EPOC X وبرنامج EmotivPRO مع واجهة برمجة تطبيقات Cortex API.

• يأمل الطلاب أن يقدم مشروع Duet علاجًا موسيقيًا فعالًا للأطفال والأفراد ذوي الاحتياجات الخاصة من خلال تجارب موسيقية مخصصة.

تقدم Emotiv تهانيها القلبية لطلاب جامعة يو إس سي بيركلي: جياهوي جين، وصوفيا تشانغ، ودانييل وانغ، وجوستين وو، لفوزهم بالجائزة الأولى في هكاثون Cal Hacks 2024، وهو أكبر هكاثون جامعي في العالم. يترجم مشروع BCI الخاص بـ جين وزملائه، والمسمى Duet، مقاييس أداء الموجات الدماغية في الوقت الفعلي إلى موسيقى وملاحظات مرئية يتم إنشاؤها بواسطة الذكاء الاصطناعي.

كان الإلهام وراء مشروع Duet هو مواجهة تحديات تعليم الموسيقى للأطفال الذين يعانون من اضطرابات نمو وتطور.

"لسوء الحظ، يُترك العديد من الأطفال دون الأدوات التي يحتاجونها للتواصل والتعبير عن أنفسهم بشكل إبداعي،" يوضح الفريق. "هنا يأتي دور Duet. من خلال استخدام تقنية EEG، نهدف إلى تغيير الطريقة التي يتفاعل بها هؤلاء الأطفال مع الموسيقى، مما يمنحهم صوتًا ووسيلة لمشاركة مشاعرهم."

كيف يعمل؟

يستخدم مشروع Duet الذكاء الاصطناعي لتأليف الموسيقى بناءً على الحالات العاطفية للشخص في الوقت الفعلي من خلال قراءة الموجات الدماغية. واستخدم الفريق سماعات رأس Emotiv EPOC X لتدفق بيانات الموجات الدماغية ومعالجتها عبر لغة Python باستخدام Emotiv Cortex API. ولمساعدتهم في مساعيهم، نسقت Emotiv للطلاب استعارة أجهزة EEG ومنحتهم وصولاً مؤقتًا إلى اشتراك برنامج PRO الخاص بها.

صنفت تقنية التعلم الآلي الخاصة بشركة Emotiv نشاط الدماغ إلى حالات عاطفية (مقاييس الأداء)، والتي تم تغذيتها بنموذج لغة Gemini الضخم من Google لتوليد الموسيقى. وبدلاً من اتباع قواعد ثابتة، عمل مشروع Duet كملحن حي، حيث يقرر الثواني القليلة القادمة من الموسيقى بناءً على المشاعر والأدوات المتاحة والمخرجات السابقة.

وأوضح الفريق أن Sonic Pi تولى تشغيل الموسيقى الحية، بينما أدار SingleStore البيانات ذات زمن الاستجابة المنخفض، وعملت واجهتنا الأمامية المبنية بـ Next.js على تصور كل من الموجات الدماغية والموسيقى المقابلة لها في الوقت الفعلي.

"في Duet، نحن ملتزمون بجعل الموسيقى تجربة شاملة للجميع، مما يضمن أن كل طفل — وكل من يجد صعوبة في التعبير عن نفسه — لديه الفرصة للتعبير عن ذاته الإبداعية الحقيقية!"

مستقبل مشروع Duet BCI

يقول جين وزملاؤه إن أكبر تحدٍ واجههم كان ابتكار طريقة لتوليد موسيقى حية باستخدام الذكاء الاصطناعي.

"لقد اعتقدنا في البداية أن الأمر مستحيل وأن التكنولوجيا لم تصل ’بعد‘ إلى هذا المستوى — لم نتمكن من العثور على أي شيء عبر الإنترنت حول هذا الموضوع، وقضينا ساعات في التفكير في كيفية التحول إلى فكرة أخرى يمكننا استخدام أجهزة EEG معها،" كما صرحوا.

وأوضح جين وزملاؤه: "ومع ذلك، واصلنا السير في النهاية وابتكرنا طريقة جديدة تمامًا لإنتاج موسيقى حية بالذكاء الاصطناعي لا توجد، على حد علمنا، في أي مكان آخر. كانت هذه المرة الأولى لمعظمنا في العمل مع هذا النوع من الأجهزة، وواجهتنا العديد من المشكلات في توصيلها بشكل صحيح بأجهزة الكمبيوتر الخاصة بنا — ولكن في النهاية نجحنا في تشغيل كل شيء بسلاسة، وكان ذلك إنجازًا هائلاً بالنسبة لنا لجعل كل شيء يعمل!"

لمعرفة المزيد حول Duet وعرض الكود في GitHub لتجربته بنفسك، اطلع على القصة الكاملة على موقع DevPost.

من جميع العاملين في Emotiv - تهانينا للفريق، نحن فخورون جدًا بكم!

قد يعجبك أيضًا:

• يربط برنامج BCI هذا الأطفال ذوي الاحتياجات الخاصة بالعالم من حولهم

• العلاج بالارتجاع العصبي الموسيقي لعلاج اكتئاب كبار السن

• الواجهة الحاسوبية للدماغ الموسيقية: كيف تتحكم في Spotify بعقلك

ابتدكار BCI للجميع

تدعم Emotiv بفخر الابتكار من أجل رفاهية البشرية. إذا كنت ترغب في الاستفسار عن إعارة المنتجات أو التبرعات أو المساعدة المالية للحصول على منتجات Emotiv لمشروع EEG أو BCI الخاص بك، يسعدنا أن نسمع منك.

اتصل بنا