دوئت: پروژه موسیقی امواج مغزی BCI برنده کالهکس ۲۰۲۴
های دی دوران
۳۰ مهر ۱۴۰۳
به اشتراک گذاری:
یک گروه با استعداد از دانشجویان در USC Berkley جایزه اول را در Cal Hacks 2024 برای پروژه نوآورانه موسیقی BCI خود به نام "Duet" به دست آوردند.
Duet از هوش مصنوعی برای تنظیم موسیقی بر اساس حالات احساسی در زمان واقعی که توسط هدست Emotiv Epoc X و نرمافزار emotivpro با استفاده از Cortex API جمعآوری و ترجمه میشود، استفاده میکند.
دانشجویان امیدوارند Duet از طریق تجربیات موسیقایی شخصیشده، درمان موسیقی موثری برای کودکان و افراد دارای معلولیت ارائه دهد.
Emotiv به دانشجویان USC Berkley، جیهوی جین، سوفیا ژانگ، دانیل وانگ و جاستین وو برای کسب جایزه اول در Cal Hacks 2024، بزرگترین هکاتون کالجی جهان، صمیمانه تبریک میگوید. پروژه BCI جین و همکاران، Duet، معیارهای عملکرد موج مغزی در زمان واقعی را به موسیقی تولید شده توسط هوش مصنوعی و بازخورد بصری ترجمه میکند.
الهامبخش Duet مواجهه با چالشهای آموزش موسیقی به کودکان با ناتوانیهای رشدی بود.
«متاسفانه، بسیاری از کودکان بدون ابزارهایی که برای ارتباط و بیان خلاقانه خود نیاز دارند، رها میشوند»، تیم توضیح میدهد. «اینجاست که Duet وارد میشود. با استفاده از فناوری EEG، ما قصد داریم نحوه تعامل این کودکان با موسیقی را تغییر دهیم و به آنها صدایی و راهی برای به اشتراک گذاشتن احساساتشان بدهیم."
چگونگی کارکرد
Duet با استفاده از هوش مصنوعی به تنظیم موسیقی بر اساس حالات احساسی واقعی افراد با خواندن امواج مغزی میپردازد. تیم از هدستهای Emotiv Epoc X برای استریم دادههای موج مغزی استفاده کرده و آن را از طریق Python با Emotiv Cortex API پردازش کردند. برای کمک به آنها در تلاشهایشان، Emotiv ترتیبی داد که دانشجویان سختافزار EEG را قرض بگیرند و دسترسی موقت به نرمافزار اشتراکی PRO آن را اعطا کرد.
یادگیری ماشینی اختصاصی Emotiv فعالیت مغزی را به حالات احساسی (معیارهای عملکرد) طبقهبندی کرد، سپس آن را به Gemini LLM گوگل جهت تولید موسیقی ارسال کرد. به جای پیروی از قوانین ثابت، Duet به عنوان یک تنظیمکننده زنده عمل میکرد و بر اساس احساسات، ابزارهای موجود و خروجیهای قبلی، در مورد ثانیههای بعدی موسیقی تصمیمگیری میکرد.
Sonic Pi پخش زنده موسیقی را مدیریت کرد، SingleStore دادهها را با تأخیر کم مدیریت کرد و رابط کاربری Next.js ما امواج مغزی و موسیقی مربوطه را در زمان واقعی تجسم کرد، تیم توضیح داد.
«در Duet، ما متعهد هستیم که موسیقی را به یک تجربه فراگیر برای همه تبدیل کنیم، به طوری که هر کودکی و هر کسی که برای بیان خود تلاش میکند، فرصتی برای ابراز وجود خلاقانه واقعی خود داشته باشد!»
آینده Duet BCI
جین و همکاران میگویند بزرگترین چالش آنها پیدا کردن روشی برای تولید موسیقی زنده با هوش مصنوعی بود.
«در ابتدا فکر میکردیم که غیرممکن است و فناوری هنوز آماده نیست - نتوانستیم چیزی آنلاین درباره آن پیدا کنیم، و حتی ساعتها به این فکر کردیم که چگونه به ایده دیگری که میتوانیم EEG خود را در آن استفاده کنیم، بپردازیم»، آنها گفتند.
«با این حال، در نهایت از آن عبور کردیم و روشی کاملاً جدید برای تولید موسیقی زنده با هوش مصنوعی که تا جایی که میدانیم در جای دیگری وجود ندارد، ابداع کردیم»، جین و همکاران توضیح دادند. «این اولین بار برای اکثر ما بود که با این نوع سختافزار کار میکردیم و با مشکلات زیادی در اتصال مناسب آن به رایانههایمان مواجه شدیم، اما در نهایت همه چیز به خوبی اجرا شد، بنابراین برای ما یک دستاورد بزرگ بود که همه چیز را به کار گرفتیم!»
برای کسب اطلاعات بیشتر درباره Duet و مشاهده کد در GitHub برای امتحان شما، داستان کامل را در DevPost بررسی کنید.
از طرف همه ما در Emotiv - تبریک، تیم، ما خیلی به شما افتخار میکنیم!
همچنین ممکن است از این موارد لذت ببرید:
نوآوری BCI برای همه
Emotiv با افتخار از نوآوری برای بهبود انسانیت حمایت میکند. اگر مایلید درباره قرض دادن محصولات، اهدای محصولات، یا کمک مالی برای تهیه محصولات Emotiv برای پروژه EEG یا BCI خود بپرسید، علاقهمندیم از شما بشنویم.
با ما تماس بگیرید
یک گروه با استعداد از دانشجویان در USC Berkley جایزه اول را در Cal Hacks 2024 برای پروژه نوآورانه موسیقی BCI خود به نام "Duet" به دست آوردند.
Duet از هوش مصنوعی برای تنظیم موسیقی بر اساس حالات احساسی در زمان واقعی که توسط هدست Emotiv Epoc X و نرمافزار emotivpro با استفاده از Cortex API جمعآوری و ترجمه میشود، استفاده میکند.
دانشجویان امیدوارند Duet از طریق تجربیات موسیقایی شخصیشده، درمان موسیقی موثری برای کودکان و افراد دارای معلولیت ارائه دهد.
Emotiv به دانشجویان USC Berkley، جیهوی جین، سوفیا ژانگ، دانیل وانگ و جاستین وو برای کسب جایزه اول در Cal Hacks 2024، بزرگترین هکاتون کالجی جهان، صمیمانه تبریک میگوید. پروژه BCI جین و همکاران، Duet، معیارهای عملکرد موج مغزی در زمان واقعی را به موسیقی تولید شده توسط هوش مصنوعی و بازخورد بصری ترجمه میکند.
الهامبخش Duet مواجهه با چالشهای آموزش موسیقی به کودکان با ناتوانیهای رشدی بود.
«متاسفانه، بسیاری از کودکان بدون ابزارهایی که برای ارتباط و بیان خلاقانه خود نیاز دارند، رها میشوند»، تیم توضیح میدهد. «اینجاست که Duet وارد میشود. با استفاده از فناوری EEG، ما قصد داریم نحوه تعامل این کودکان با موسیقی را تغییر دهیم و به آنها صدایی و راهی برای به اشتراک گذاشتن احساساتشان بدهیم."
چگونگی کارکرد
Duet با استفاده از هوش مصنوعی به تنظیم موسیقی بر اساس حالات احساسی واقعی افراد با خواندن امواج مغزی میپردازد. تیم از هدستهای Emotiv Epoc X برای استریم دادههای موج مغزی استفاده کرده و آن را از طریق Python با Emotiv Cortex API پردازش کردند. برای کمک به آنها در تلاشهایشان، Emotiv ترتیبی داد که دانشجویان سختافزار EEG را قرض بگیرند و دسترسی موقت به نرمافزار اشتراکی PRO آن را اعطا کرد.
یادگیری ماشینی اختصاصی Emotiv فعالیت مغزی را به حالات احساسی (معیارهای عملکرد) طبقهبندی کرد، سپس آن را به Gemini LLM گوگل جهت تولید موسیقی ارسال کرد. به جای پیروی از قوانین ثابت، Duet به عنوان یک تنظیمکننده زنده عمل میکرد و بر اساس احساسات، ابزارهای موجود و خروجیهای قبلی، در مورد ثانیههای بعدی موسیقی تصمیمگیری میکرد.
Sonic Pi پخش زنده موسیقی را مدیریت کرد، SingleStore دادهها را با تأخیر کم مدیریت کرد و رابط کاربری Next.js ما امواج مغزی و موسیقی مربوطه را در زمان واقعی تجسم کرد، تیم توضیح داد.
«در Duet، ما متعهد هستیم که موسیقی را به یک تجربه فراگیر برای همه تبدیل کنیم، به طوری که هر کودکی و هر کسی که برای بیان خود تلاش میکند، فرصتی برای ابراز وجود خلاقانه واقعی خود داشته باشد!»
آینده Duet BCI
جین و همکاران میگویند بزرگترین چالش آنها پیدا کردن روشی برای تولید موسیقی زنده با هوش مصنوعی بود.
«در ابتدا فکر میکردیم که غیرممکن است و فناوری هنوز آماده نیست - نتوانستیم چیزی آنلاین درباره آن پیدا کنیم، و حتی ساعتها به این فکر کردیم که چگونه به ایده دیگری که میتوانیم EEG خود را در آن استفاده کنیم، بپردازیم»، آنها گفتند.
«با این حال، در نهایت از آن عبور کردیم و روشی کاملاً جدید برای تولید موسیقی زنده با هوش مصنوعی که تا جایی که میدانیم در جای دیگری وجود ندارد، ابداع کردیم»، جین و همکاران توضیح دادند. «این اولین بار برای اکثر ما بود که با این نوع سختافزار کار میکردیم و با مشکلات زیادی در اتصال مناسب آن به رایانههایمان مواجه شدیم، اما در نهایت همه چیز به خوبی اجرا شد، بنابراین برای ما یک دستاورد بزرگ بود که همه چیز را به کار گرفتیم!»
برای کسب اطلاعات بیشتر درباره Duet و مشاهده کد در GitHub برای امتحان شما، داستان کامل را در DevPost بررسی کنید.
از طرف همه ما در Emotiv - تبریک، تیم، ما خیلی به شما افتخار میکنیم!
همچنین ممکن است از این موارد لذت ببرید:
نوآوری BCI برای همه
Emotiv با افتخار از نوآوری برای بهبود انسانیت حمایت میکند. اگر مایلید درباره قرض دادن محصولات، اهدای محصولات، یا کمک مالی برای تهیه محصولات Emotiv برای پروژه EEG یا BCI خود بپرسید، علاقهمندیم از شما بشنویم.
با ما تماس بگیرید
یک گروه با استعداد از دانشجویان در USC Berkley جایزه اول را در Cal Hacks 2024 برای پروژه نوآورانه موسیقی BCI خود به نام "Duet" به دست آوردند.
Duet از هوش مصنوعی برای تنظیم موسیقی بر اساس حالات احساسی در زمان واقعی که توسط هدست Emotiv Epoc X و نرمافزار emotivpro با استفاده از Cortex API جمعآوری و ترجمه میشود، استفاده میکند.
دانشجویان امیدوارند Duet از طریق تجربیات موسیقایی شخصیشده، درمان موسیقی موثری برای کودکان و افراد دارای معلولیت ارائه دهد.
Emotiv به دانشجویان USC Berkley، جیهوی جین، سوفیا ژانگ، دانیل وانگ و جاستین وو برای کسب جایزه اول در Cal Hacks 2024، بزرگترین هکاتون کالجی جهان، صمیمانه تبریک میگوید. پروژه BCI جین و همکاران، Duet، معیارهای عملکرد موج مغزی در زمان واقعی را به موسیقی تولید شده توسط هوش مصنوعی و بازخورد بصری ترجمه میکند.
الهامبخش Duet مواجهه با چالشهای آموزش موسیقی به کودکان با ناتوانیهای رشدی بود.
«متاسفانه، بسیاری از کودکان بدون ابزارهایی که برای ارتباط و بیان خلاقانه خود نیاز دارند، رها میشوند»، تیم توضیح میدهد. «اینجاست که Duet وارد میشود. با استفاده از فناوری EEG، ما قصد داریم نحوه تعامل این کودکان با موسیقی را تغییر دهیم و به آنها صدایی و راهی برای به اشتراک گذاشتن احساساتشان بدهیم."
چگونگی کارکرد
Duet با استفاده از هوش مصنوعی به تنظیم موسیقی بر اساس حالات احساسی واقعی افراد با خواندن امواج مغزی میپردازد. تیم از هدستهای Emotiv Epoc X برای استریم دادههای موج مغزی استفاده کرده و آن را از طریق Python با Emotiv Cortex API پردازش کردند. برای کمک به آنها در تلاشهایشان، Emotiv ترتیبی داد که دانشجویان سختافزار EEG را قرض بگیرند و دسترسی موقت به نرمافزار اشتراکی PRO آن را اعطا کرد.
یادگیری ماشینی اختصاصی Emotiv فعالیت مغزی را به حالات احساسی (معیارهای عملکرد) طبقهبندی کرد، سپس آن را به Gemini LLM گوگل جهت تولید موسیقی ارسال کرد. به جای پیروی از قوانین ثابت، Duet به عنوان یک تنظیمکننده زنده عمل میکرد و بر اساس احساسات، ابزارهای موجود و خروجیهای قبلی، در مورد ثانیههای بعدی موسیقی تصمیمگیری میکرد.
Sonic Pi پخش زنده موسیقی را مدیریت کرد، SingleStore دادهها را با تأخیر کم مدیریت کرد و رابط کاربری Next.js ما امواج مغزی و موسیقی مربوطه را در زمان واقعی تجسم کرد، تیم توضیح داد.
«در Duet، ما متعهد هستیم که موسیقی را به یک تجربه فراگیر برای همه تبدیل کنیم، به طوری که هر کودکی و هر کسی که برای بیان خود تلاش میکند، فرصتی برای ابراز وجود خلاقانه واقعی خود داشته باشد!»
آینده Duet BCI
جین و همکاران میگویند بزرگترین چالش آنها پیدا کردن روشی برای تولید موسیقی زنده با هوش مصنوعی بود.
«در ابتدا فکر میکردیم که غیرممکن است و فناوری هنوز آماده نیست - نتوانستیم چیزی آنلاین درباره آن پیدا کنیم، و حتی ساعتها به این فکر کردیم که چگونه به ایده دیگری که میتوانیم EEG خود را در آن استفاده کنیم، بپردازیم»، آنها گفتند.
«با این حال، در نهایت از آن عبور کردیم و روشی کاملاً جدید برای تولید موسیقی زنده با هوش مصنوعی که تا جایی که میدانیم در جای دیگری وجود ندارد، ابداع کردیم»، جین و همکاران توضیح دادند. «این اولین بار برای اکثر ما بود که با این نوع سختافزار کار میکردیم و با مشکلات زیادی در اتصال مناسب آن به رایانههایمان مواجه شدیم، اما در نهایت همه چیز به خوبی اجرا شد، بنابراین برای ما یک دستاورد بزرگ بود که همه چیز را به کار گرفتیم!»
برای کسب اطلاعات بیشتر درباره Duet و مشاهده کد در GitHub برای امتحان شما، داستان کامل را در DevPost بررسی کنید.
از طرف همه ما در Emotiv - تبریک، تیم، ما خیلی به شما افتخار میکنیم!
همچنین ممکن است از این موارد لذت ببرید:
نوآوری BCI برای همه
Emotiv با افتخار از نوآوری برای بهبود انسانیت حمایت میکند. اگر مایلید درباره قرض دادن محصولات، اهدای محصولات، یا کمک مالی برای تهیه محصولات Emotiv برای پروژه EEG یا BCI خود بپرسید، علاقهمندیم از شما بشنویم.
