ডুয়েট: ব্রেইনওয়েভস মিউজিক BCI প্রকল্প ক্যাল হ্যাকস ২০২৪ জিতে নিয়েছে

• ইউএসসি বার্কলে-এর একটি প্রতিভাবান ছাত্রদল তাদের উদ্ভাবনী বিইসিআই সঙ্গীত প্রকল্প, "ডুয়েট"-এর জন্য ক্যাল হ্যাকস ২০২৪-এ প্রথম পুরস্কার জিতে নেয়।

• ডুয়েট এআই ব্যবহার করে সঙ্গীত রচনা করে বাস্তব-সময়ের আবেগীয় অবস্থার উপর ভিত্তি করে যা একটি ইমোটিভ ইপিওসি এক্স হেডসেট এবং ইমোটিভপ্রো সফটওয়্যার দ্বারা সংগ্রহ এবং অনুবাদ করা হয় কোরটেক্স এপিআই-সহ।

• শিক্ষার্থীরা আশা করেন যে ডুয়েট শিশুদের এবং প্রতিবন্ধীদের জন্য ব্যক্তিগতকৃত সঙ্গীত অভিজ্ঞতার মাধ্যমে কার্যকর সঙ্গীত থেরাপি সরবরাহ করবে।

ইমোটিভ ইউএসসি বার্কলে-এর শিক্ষার্থী জিয়াহুয়ি জিন, সোফিয়া ঝাং, ড্যানিয়েল ওয়াং, এবং জাস্টিন উকে ক্যাল হ্যাকস ২০২৪-এ প্রথম পুরস্কার জিতার জন্য আন্তরিক অভিনন্দন জানায়, যা বিশ্বের বৃহত্তম কলেজিয়েট হ্যাকাথন। জিন ইত্যাদির বিইসিআই প্রকল্প, ডুয়েট, বাস্তব-সময়ের মস্তিষ্কের তরঙ্গ কর্মক্ষমতা মেট্রিকগুলিকে এআই-উৎপন্ন সঙ্গীত এবং চাক্ষুষ প্রতিক্রিয়া-তে অনুবাদ করে।

ডুয়েটের উদ্দেশ্য হচ্ছে শিশুদের বিকাশের প্রতিবন্ধকতাগুলি পার করার জন্য সঙ্গীত শেখানোর চ্যালেঞ্জগুলি গ্রহণ করা।

"দুর্ভাগ্যবশত, অনেক শিশু এমন সরঞ্জাম ছাড়া আত্নপ্রকাশ করতে এবং সৃজনশীলভাবে নিজেদের প্রকাশ করতে ফেলে যায়," দলের একটি ব্যাখ্যা করে। "এটাই ডুয়েটে আসে। ইইজি প্রযুক্তি ব্যবহার করে, আমরা আশা করি এই শিশুদের সঙ্গীতের সাথে কথা বলার এবং তাদের অনুভূতি শেয়ার করার সুযোগ দিব।"

এটি কীভাবে কাজ করে

ডুয়েট শতকরা মানুষদের বাস্তব-সময় আবেগীয় অবস্থার উপর ভিত্তি করে সঙ্গীত রচনা করার জন্য কৃত্রিম বুদ্ধিমত্তা ব্যবহার করে মস্তিষ্কের তরঙ্গগুলি পড়ে। দলের সদস্যরা ইমোটিভ ইপিওসি এক্স হেডসেট ব্যবহার করে মস্তিষ্কের তরঙ্গের তথ্য সম্প্রচার করেছেন এবং এটি পাইথন ব্যবহার করে ইমোটিভ কোরটেক্স এপিআই-এর মাধ্যমে প্রক্রিয়া করেছেন। তাদের প্রচেষ্টায় সহায়তা করার জন্য, ইমোটিভ শিক্ষার্থীদের ইইজি হার্ডওয়্যার ধার দেওয়ার ব্যবস্থা করেছিল এবং এর প্রো সাবস্ক্রিপশন সফটওয়্যার ব্যবহার করার জন্য অস্থায়ী অ্যাক্সেস প্রদান করেছিল।

ইমোটিভের মালিকানাধীন মেশিন লার্নিং মস্তিষ্কের কার্যকলাপকে আবেগীয় অবস্থায় শ্রেণীবদ্ধ করে (কর্মক্ষমতা মেট্রিক), যা গুগলের জেমিনি এলএলএম-এর মধ্যে পরিবেশন করা হয় সঙ্গীত উৎপন্ন করতে। নির্দিষ্ট নিয়ম অনুসরণের পরিবর্তে, ডুয়েট একটি জীবন্ত সুরকার হিসেবে কাজ করেছিল, আবেগগুলির উপর ভিত্তি করে, পাওয়া যন্ত্র এবং পূর্ববর্তী আউটপুট অনুযায়ী পরবর্তী কয়েক সেকেন্ডের সঙ্গীত নির্ধারণ করে।

সনিক পি লাইভ সঙ্গীত প্লেব্যাক পরিচালনা করেছিল, সিংগেলস্টোর নিম্ন-অবস্থানীয় ডেটা পরিচালনা করেছিল, এবং আমাদের নেক্সট.জেএস ফ্রন্টএন্ড বাস্তব-সময়ে মস্তিষ্কের তরঙ্গ এবং সংশ্লিষ্ট সঙ্গীতের উভয়কে দৃশ্যায়িত করেছিল, দলের সদস্যরা ব্যাখ্যা করেছেন।

"ডুয়েটে, আমরা সঙ্গীতকে সকলের জন্য একটি অন্তর্ভুক্তিমূলক অভিজ্ঞতা তৈরি করতে প্রতিশ্রুতিবদ্ধ, ensuring that every child—and anyone who struggles to express themselves—has the opportunity to convey their true creative self!"

ডুয়েট বিইসি আই-এর ভবিষ্যৎ

জিন ইত্যাদি জানায় যে তাদের সবচেয়ে বড় চ্যালেঞ্জ ছিল কৃত্রিম বুদ্ধিমত্তার মাধ্যমে জীবন্ত সঙ্গীত উৎপন্ন করার একটি উপায় বের করা।

"আমরা মূলত বিশ্বাস করেছিলাম যে এটি অসম্ভব এবং প্রযুক্তি তখন “অবস্থান” ছিল না — আমরা এ বিষয়ে অনলাইনে কিছুই খুঁজে পাইনি এবং এমন এক আইডিয়ার দিকে বিকশিত হতে ঘণ্টার পর ঘণ্টা চিন্তা করেছি যা আমরা আমাদের ইইজির সাথে ব্যবহার করতে পারব," তারা বলেছিল।

"তবে, আমরা পরবর্তীতে অতিক্রম করেছিলাম এবং একটি সম্পূর্ণ নতুন পদ্ধতি নিয়ে এসেছি যা জীবন্ত এআই সঙ্গীত উৎপন্ন করতে ব্যবহৃত হয় যা, আমাদের জ্ঞানে, অন্য কোথাও নেই," জিন ইত্যাদি ব্যাখ্যা করেছিল। "এটি আমাদের বেশিরভাগের প্রথম বার ছিল এই ধরনের হার্ডওয়্যারে কাজ করার, এবং এটি আমাদের কম্পিউটারের সাথে সঠিকভাবে সংযোগ স্থাপন করতে অনেক সমস্যার মুখোমুখি হয়েছিল — কিন্তু শেষ পর্যন্ত, আমরা সবকিছু সঠিকভাবে চালানোর ব্যবস্থা করেছি, তাই এটি আমাদের জন্য একটি বড় অর্জন ছিল!"

ডুয়েট সম্পর্কে আরও জানতে এবং কোড দেখতে গিটহাবে এটি ব্যবহার করতে ডেভপোস্টে পুরো গল্পটি দেখুন.

ইমোটিভের পক্ষ থেকে সবাইকে অভিনন্দন - দল, আমরা তোমাদের প্রায় gurহানিত!

আপনারা সম্ভবত এও উপভোগ করবেন:

• এই বিইসি আই প্রোগ্রাম শিশুদের প্রতিবন্ধীদের তাদের জগতের সাথে সংযুক্ত করে

• বৃদ্ধদের বিষণ্নতার চিকিৎসার জন্য মিউজিক নিউরোফিডব্যাক থেরাপি

• সঙ্গীত ব্রেইন কম্পিউটার ইন্টারফেস: আপনার মনে স্পটিফাই নিয়ন্ত্রণ করার উপায়

সবার জন্য বিইসি আই উদ্ভাবন

ইমোটিভ গর্বিতভাবে মানবতার কল্যাণের জন্য উদ্ভাবনকে সমর্থন করে। যদি আপনি পণ্যের লেনদেন, দান, বা ইমোটিভ পণ্যগুলি আপনার ইইজি বা বিইসি আই প্রকল্পের জন্য পেতে আর্থিক সহায়তার বিষয়ে জানতে চান, তবে আমরা আপনাদের কাছে শুনতে চাই।

আমাদের সাথে যোগাযোগ করুন