دوئت: پروژه موسیقی امواج مغزی BCI برنده کالهکس ۲۰۲۴

اچ. بی. دوران

به‌روزرسانی در

۳۰ مهر ۱۴۰۳

دوئت: پروژه موسیقی امواج مغزی BCI برنده کالهکس ۲۰۲۴

اچ. بی. دوران

به‌روزرسانی در

۳۰ مهر ۱۴۰۳

دوئت: پروژه موسیقی امواج مغزی BCI برنده کالهکس ۲۰۲۴

اچ. بی. دوران

به‌روزرسانی در

۳۰ مهر ۱۴۰۳

  • گروهی بااستعداد از دانشجویان USC Berkley برای پروژهٔ نوآورانهٔ موسیقی BCI خود، «Duet»، در Cal Hacks 2024 جایزهٔ اول را از آنِ خود کردند.

  • Duet از هوش مصنوعی برای آهنگ‌سازی بر اساس حالت‌های احساسیِ لحظه‌ای استفاده می‌کند؛ این داده‌ها توسط یک هدست Emotiv Epoc X و نرم‌افزار EmotivPRO همراه با Cortex API جمع‌آوری و ترجمه می‌شوند.

  • دانشجویان امیدوارند Duet از طریق تجربه‌های موسیقاییِ شخصی‌سازی‌شده، موسیقی‌درمانیِ مؤثری برای کودکان و افراد دارای معلولیت فراهم کند.

Emotiv صمیمانه به دانشجویان USC Berkley، Jiahui Jin، Sophia Zhang، Daniel Wang و Justin Wu بابت کسب جایزهٔ اول در Cal Hacks 2024، بزرگ‌ترین هکاتون دانشگاهیِ جهان، تبریک می‌گوید. پروژهٔ BCI جین و همکاران، Duet، شاخص‌های عملکردِ امواج مغزیِ لحظه‌ای را به موسیقیِ تولیدشده توسط هوش مصنوعی و بازخورد بصری ترجمه می‌کند.

الهام‌بخش Duet، مواجهه با چالش‌های آموزش موسیقی به کودکان دارای ناتوانی‌های رشدی بود.

«متأسفانه، بسیاری از کودکان بدون ابزارهایی که برای برقراری ارتباط و بیان خلاقانهٔ خود نیاز دارند، رها می‌شوند،» تیم توضیح می‌دهد. «اینجاست که Duet وارد می‌شود. با بهره‌گیری از فناوری EEG، هدف ما این است که شیوهٔ تعامل این کودکان با موسیقی را دگرگون کنیم و به آن‌ها صدایی و ابزاری برای بیان احساساتشان بدهیم.»

نحوهٔ کار

Duet از هوش مصنوعی برای آهنگ‌سازی بر پایهٔ حالت‌های احساسیِ لحظه‌ایِ یک فرد، با خواندن امواج مغزی، استفاده می‌کند. تیم از هدست‌های Emotiv Epoc X برای پخش داده‌های امواج مغزی استفاده کرد و آن‌ها را از طریق پایتون و با استفاده از Emotiv Cortex API پردازش نمود. برای کمک به آنان در این مسیر، Emotiv هماهنگ کرد تا دانشجویان سخت‌افزار EEG را امانت بگیرند و دسترسی موقت به نرم‌افزار اشتراکی PRO خود داشته باشند.

یادگیری ماشینیِ اختصاصیِ Emotiv فعالیت مغزی را به حالت‌های احساسی (شاخص‌های عملکرد) طبقه‌بندی کرد و آن را به LLM جمینی گوگل فرستاد تا موسیقی تولید شود. Duet به‌جای پیروی از قوانین ثابت، مانند یک آهنگ‌ساز زنده عمل می‌کرد و بر اساس احساسات، سازهای در دسترس و خروجی‌های پیشین دربارهٔ چند ثانیهٔ بعدیِ موسیقی تصمیم می‌گرفت.

Sonic Pi پخش زندهٔ موسیقی را مدیریت کرد، SingleStore داده‌های با تأخیر کم را اداره کرد، و فرانت‌اند Next.js ما امواج مغزی و موسیقی متناظر را به‌صورت بلادرنگ به تصویر کشید، تیم توضیح داد.

«در Duet، ما متعهدیم موسیقی را برای همه تجربه‌ای فراگیر کنیم و اطمینان یابیم که هر کودک—و هر کسی که در بیان خود دچار دشواری است—فرصت دارد خودِ خلاقِ واقعی‌اش را بیان کند!»

آیندهٔ Duet BCI

جین و همکاران می‌گویند بزرگ‌ترین چالششان پیدا کردن روشی برای تولید موسیقی زنده با هوش مصنوعی بود.

«در ابتدا فکر می‌کردیم این کار غیرممکن است و فناوری هنوز به آن مرحله نرسیده — هیچ چیز آنلاین درباره‌اش پیدا نمی‌کردیم و حتی ساعت‌ها فکر می‌کردیم چطور به ایده‌ای دیگر تغییر مسیر بدهیم که بتوانیم از EEGهایمان با آن استفاده کنیم،» آن‌ها گفتند.

«با این حال، در نهایت پشتکار به خرج دادیم و به روشی کاملاً جدید برای تولید زندهٔ موسیقی با هوش مصنوعی رسیدیم که تا جایی که می‌دانیم، در هیچ جای دیگری وجود ندارد،» جین و همکاران توضیح دادند. «این برای بیشتر ما نخستین تجربهٔ کار با این نوع سخت‌افزار بود و در اتصال درست آن به رایانه‌هایمان با مشکلات زیادی روبه‌رو شدیم — اما در نهایت توانستیم همه‌چیز را روان و بی‌نقص اجرا کنیم، بنابراین برای ما دستاورد بزرگی بود که همه‌چیز را به کار بیندازیم!»

برای آشنایی بیشتر با Duet و دیدن کد در GitHub تا خودتان آن را امتحان کنید، داستان کامل را در DevPost ببینید.

از طرف همهٔ ما در Emotiv - تبریک می‌گوییم، تیم، به شما بسیار افتخار می‌کنیم!

شاید این‌ها را هم دوست داشته باشید:



نوآوری BCI برای همه

Emotiv با افتخار از نوآوری در جهت بهبود بشریت حمایت می‌کند. اگر مایلید دربارهٔ امانت‌دادن محصول، کمک‌های مالی یا حمایت مالی برای تهیهٔ محصولات Emotiv برای پروژهٔ EEG یا BCI خود پرس‌وجو کنید، خوشحال می‌شویم از شما بشنویم.

تماس با ما

  • گروهی بااستعداد از دانشجویان USC Berkley برای پروژهٔ نوآورانهٔ موسیقی BCI خود، «Duet»، در Cal Hacks 2024 جایزهٔ اول را از آنِ خود کردند.

  • Duet از هوش مصنوعی برای آهنگ‌سازی بر اساس حالت‌های احساسیِ لحظه‌ای استفاده می‌کند؛ این داده‌ها توسط یک هدست Emotiv Epoc X و نرم‌افزار EmotivPRO همراه با Cortex API جمع‌آوری و ترجمه می‌شوند.

  • دانشجویان امیدوارند Duet از طریق تجربه‌های موسیقاییِ شخصی‌سازی‌شده، موسیقی‌درمانیِ مؤثری برای کودکان و افراد دارای معلولیت فراهم کند.

Emotiv صمیمانه به دانشجویان USC Berkley، Jiahui Jin، Sophia Zhang، Daniel Wang و Justin Wu بابت کسب جایزهٔ اول در Cal Hacks 2024، بزرگ‌ترین هکاتون دانشگاهیِ جهان، تبریک می‌گوید. پروژهٔ BCI جین و همکاران، Duet، شاخص‌های عملکردِ امواج مغزیِ لحظه‌ای را به موسیقیِ تولیدشده توسط هوش مصنوعی و بازخورد بصری ترجمه می‌کند.

الهام‌بخش Duet، مواجهه با چالش‌های آموزش موسیقی به کودکان دارای ناتوانی‌های رشدی بود.

«متأسفانه، بسیاری از کودکان بدون ابزارهایی که برای برقراری ارتباط و بیان خلاقانهٔ خود نیاز دارند، رها می‌شوند،» تیم توضیح می‌دهد. «اینجاست که Duet وارد می‌شود. با بهره‌گیری از فناوری EEG، هدف ما این است که شیوهٔ تعامل این کودکان با موسیقی را دگرگون کنیم و به آن‌ها صدایی و ابزاری برای بیان احساساتشان بدهیم.»

نحوهٔ کار

Duet از هوش مصنوعی برای آهنگ‌سازی بر پایهٔ حالت‌های احساسیِ لحظه‌ایِ یک فرد، با خواندن امواج مغزی، استفاده می‌کند. تیم از هدست‌های Emotiv Epoc X برای پخش داده‌های امواج مغزی استفاده کرد و آن‌ها را از طریق پایتون و با استفاده از Emotiv Cortex API پردازش نمود. برای کمک به آنان در این مسیر، Emotiv هماهنگ کرد تا دانشجویان سخت‌افزار EEG را امانت بگیرند و دسترسی موقت به نرم‌افزار اشتراکی PRO خود داشته باشند.

یادگیری ماشینیِ اختصاصیِ Emotiv فعالیت مغزی را به حالت‌های احساسی (شاخص‌های عملکرد) طبقه‌بندی کرد و آن را به LLM جمینی گوگل فرستاد تا موسیقی تولید شود. Duet به‌جای پیروی از قوانین ثابت، مانند یک آهنگ‌ساز زنده عمل می‌کرد و بر اساس احساسات، سازهای در دسترس و خروجی‌های پیشین دربارهٔ چند ثانیهٔ بعدیِ موسیقی تصمیم می‌گرفت.

Sonic Pi پخش زندهٔ موسیقی را مدیریت کرد، SingleStore داده‌های با تأخیر کم را اداره کرد، و فرانت‌اند Next.js ما امواج مغزی و موسیقی متناظر را به‌صورت بلادرنگ به تصویر کشید، تیم توضیح داد.

«در Duet، ما متعهدیم موسیقی را برای همه تجربه‌ای فراگیر کنیم و اطمینان یابیم که هر کودک—و هر کسی که در بیان خود دچار دشواری است—فرصت دارد خودِ خلاقِ واقعی‌اش را بیان کند!»

آیندهٔ Duet BCI

جین و همکاران می‌گویند بزرگ‌ترین چالششان پیدا کردن روشی برای تولید موسیقی زنده با هوش مصنوعی بود.

«در ابتدا فکر می‌کردیم این کار غیرممکن است و فناوری هنوز به آن مرحله نرسیده — هیچ چیز آنلاین درباره‌اش پیدا نمی‌کردیم و حتی ساعت‌ها فکر می‌کردیم چطور به ایده‌ای دیگر تغییر مسیر بدهیم که بتوانیم از EEGهایمان با آن استفاده کنیم،» آن‌ها گفتند.

«با این حال، در نهایت پشتکار به خرج دادیم و به روشی کاملاً جدید برای تولید زندهٔ موسیقی با هوش مصنوعی رسیدیم که تا جایی که می‌دانیم، در هیچ جای دیگری وجود ندارد،» جین و همکاران توضیح دادند. «این برای بیشتر ما نخستین تجربهٔ کار با این نوع سخت‌افزار بود و در اتصال درست آن به رایانه‌هایمان با مشکلات زیادی روبه‌رو شدیم — اما در نهایت توانستیم همه‌چیز را روان و بی‌نقص اجرا کنیم، بنابراین برای ما دستاورد بزرگی بود که همه‌چیز را به کار بیندازیم!»

برای آشنایی بیشتر با Duet و دیدن کد در GitHub تا خودتان آن را امتحان کنید، داستان کامل را در DevPost ببینید.

از طرف همهٔ ما در Emotiv - تبریک می‌گوییم، تیم، به شما بسیار افتخار می‌کنیم!

شاید این‌ها را هم دوست داشته باشید:



نوآوری BCI برای همه

Emotiv با افتخار از نوآوری در جهت بهبود بشریت حمایت می‌کند. اگر مایلید دربارهٔ امانت‌دادن محصول، کمک‌های مالی یا حمایت مالی برای تهیهٔ محصولات Emotiv برای پروژهٔ EEG یا BCI خود پرس‌وجو کنید، خوشحال می‌شویم از شما بشنویم.

تماس با ما

  • گروهی بااستعداد از دانشجویان USC Berkley برای پروژهٔ نوآورانهٔ موسیقی BCI خود، «Duet»، در Cal Hacks 2024 جایزهٔ اول را از آنِ خود کردند.

  • Duet از هوش مصنوعی برای آهنگ‌سازی بر اساس حالت‌های احساسیِ لحظه‌ای استفاده می‌کند؛ این داده‌ها توسط یک هدست Emotiv Epoc X و نرم‌افزار EmotivPRO همراه با Cortex API جمع‌آوری و ترجمه می‌شوند.

  • دانشجویان امیدوارند Duet از طریق تجربه‌های موسیقاییِ شخصی‌سازی‌شده، موسیقی‌درمانیِ مؤثری برای کودکان و افراد دارای معلولیت فراهم کند.

Emotiv صمیمانه به دانشجویان USC Berkley، Jiahui Jin، Sophia Zhang، Daniel Wang و Justin Wu بابت کسب جایزهٔ اول در Cal Hacks 2024، بزرگ‌ترین هکاتون دانشگاهیِ جهان، تبریک می‌گوید. پروژهٔ BCI جین و همکاران، Duet، شاخص‌های عملکردِ امواج مغزیِ لحظه‌ای را به موسیقیِ تولیدشده توسط هوش مصنوعی و بازخورد بصری ترجمه می‌کند.

الهام‌بخش Duet، مواجهه با چالش‌های آموزش موسیقی به کودکان دارای ناتوانی‌های رشدی بود.

«متأسفانه، بسیاری از کودکان بدون ابزارهایی که برای برقراری ارتباط و بیان خلاقانهٔ خود نیاز دارند، رها می‌شوند،» تیم توضیح می‌دهد. «اینجاست که Duet وارد می‌شود. با بهره‌گیری از فناوری EEG، هدف ما این است که شیوهٔ تعامل این کودکان با موسیقی را دگرگون کنیم و به آن‌ها صدایی و ابزاری برای بیان احساساتشان بدهیم.»

نحوهٔ کار

Duet از هوش مصنوعی برای آهنگ‌سازی بر پایهٔ حالت‌های احساسیِ لحظه‌ایِ یک فرد، با خواندن امواج مغزی، استفاده می‌کند. تیم از هدست‌های Emotiv Epoc X برای پخش داده‌های امواج مغزی استفاده کرد و آن‌ها را از طریق پایتون و با استفاده از Emotiv Cortex API پردازش نمود. برای کمک به آنان در این مسیر، Emotiv هماهنگ کرد تا دانشجویان سخت‌افزار EEG را امانت بگیرند و دسترسی موقت به نرم‌افزار اشتراکی PRO خود داشته باشند.

یادگیری ماشینیِ اختصاصیِ Emotiv فعالیت مغزی را به حالت‌های احساسی (شاخص‌های عملکرد) طبقه‌بندی کرد و آن را به LLM جمینی گوگل فرستاد تا موسیقی تولید شود. Duet به‌جای پیروی از قوانین ثابت، مانند یک آهنگ‌ساز زنده عمل می‌کرد و بر اساس احساسات، سازهای در دسترس و خروجی‌های پیشین دربارهٔ چند ثانیهٔ بعدیِ موسیقی تصمیم می‌گرفت.

Sonic Pi پخش زندهٔ موسیقی را مدیریت کرد، SingleStore داده‌های با تأخیر کم را اداره کرد، و فرانت‌اند Next.js ما امواج مغزی و موسیقی متناظر را به‌صورت بلادرنگ به تصویر کشید، تیم توضیح داد.

«در Duet، ما متعهدیم موسیقی را برای همه تجربه‌ای فراگیر کنیم و اطمینان یابیم که هر کودک—و هر کسی که در بیان خود دچار دشواری است—فرصت دارد خودِ خلاقِ واقعی‌اش را بیان کند!»

آیندهٔ Duet BCI

جین و همکاران می‌گویند بزرگ‌ترین چالششان پیدا کردن روشی برای تولید موسیقی زنده با هوش مصنوعی بود.

«در ابتدا فکر می‌کردیم این کار غیرممکن است و فناوری هنوز به آن مرحله نرسیده — هیچ چیز آنلاین درباره‌اش پیدا نمی‌کردیم و حتی ساعت‌ها فکر می‌کردیم چطور به ایده‌ای دیگر تغییر مسیر بدهیم که بتوانیم از EEGهایمان با آن استفاده کنیم،» آن‌ها گفتند.

«با این حال، در نهایت پشتکار به خرج دادیم و به روشی کاملاً جدید برای تولید زندهٔ موسیقی با هوش مصنوعی رسیدیم که تا جایی که می‌دانیم، در هیچ جای دیگری وجود ندارد،» جین و همکاران توضیح دادند. «این برای بیشتر ما نخستین تجربهٔ کار با این نوع سخت‌افزار بود و در اتصال درست آن به رایانه‌هایمان با مشکلات زیادی روبه‌رو شدیم — اما در نهایت توانستیم همه‌چیز را روان و بی‌نقص اجرا کنیم، بنابراین برای ما دستاورد بزرگی بود که همه‌چیز را به کار بیندازیم!»

برای آشنایی بیشتر با Duet و دیدن کد در GitHub تا خودتان آن را امتحان کنید، داستان کامل را در DevPost ببینید.

از طرف همهٔ ما در Emotiv - تبریک می‌گوییم، تیم، به شما بسیار افتخار می‌کنیم!

شاید این‌ها را هم دوست داشته باشید:



نوآوری BCI برای همه

Emotiv با افتخار از نوآوری در جهت بهبود بشریت حمایت می‌کند. اگر مایلید دربارهٔ امانت‌دادن محصول، کمک‌های مالی یا حمایت مالی برای تهیهٔ محصولات Emotiv برای پروژهٔ EEG یا BCI خود پرس‌وجو کنید، خوشحال می‌شویم از شما بشنویم.

تماس با ما