Duet: Brainwaves Music BCI ProjectがCal Hacks 2024で優勝
H.B. Duran
更新日
2024/10/21
Duet: Brainwaves Music BCI ProjectがCal Hacks 2024で優勝
H.B. Duran
更新日
2024/10/21
Duet: Brainwaves Music BCI ProjectがCal Hacks 2024で優勝
H.B. Duran
更新日
2024/10/21
USCバークレー校の才能ある学生グループが、革新的なBCI音楽プロジェクト「Duet」で、Cal Hacks 2024の最優秀賞を獲得しました。
Duetは、Epoc XヘッドセットとCortex API搭載のEmotivPROソフトウェアによって収集および翻訳されたリアルタイムの感情状態に基づいて、AIを使用して音楽を作曲します。
学生たちは、Duetがパーソナライズされた音楽体験を通じて、障害のある子どもや個人に効果的な音楽療法を提供することを望んでいます。
Emotivは、世界最大の大学ハッカソンであるCal Hacks 2024で最優秀賞を受賞した、USCバークレー校の学生であるJiahui Jin氏、Sophia Zhang氏、Daniel Wang氏、Justin Wu氏に心から祝意を表します。Jin氏らのBCIプロジェクト「Duet」は、リアルタイムの脳波パフォーマンスメトリクスを、AIが生成する音楽とビジュアルフィードバックに翻訳します。
Duet開発のインスピレーションは、発達障害のある子どもたちに音楽を教える際の課題に対処することでした。
チームは、「残念ながら、多くの子どもたちがコミュニケーションを図り、創造的に自己表現するために必要なツールを持たないまま取り残されています」と説明します。「そこで、Duetの出番です。EEG技術を活用することで、これらの子どもたちが音楽と関わる方法を変革し、彼らに声を与え、感情を共有する手段を提供することを目指しています。」
仕組み
Duetは人工知能（AI）を使用し、脳波を読み取ることで個人のリアルタイムの感情状態に基づいた音楽を作曲します。チームはEpoc Xヘッドセットを使用して脳波データをストリーミングし、Emotiv Cortex APIを使用してPython経由で処理しました。彼らの取り組みを支援するため、Emotivは学生たちにEEGハードウェアを貸し出し、PROサブスクリプションソフトウェアへの一時的なアクセスを提供しました。
Emotiv独自の機械学習が脳の活動を感情状態（パフォーマンスメトリクス）に分類し、GoogleのGemini LLMに入力して音楽を生成しました。固定されたルールに従う代わりに、Duetはライブの作曲家として機能し、感情、利用可能な楽器、そしてこれまでの出力に基づいて、次の数秒間の音楽を決定しました。
チームは、「Sonic Piがライブ音楽の再生を処理し、SingleStoreが低レイテンシーデータを管理し、私たちのNext.jsフロントエンドが脳波と対応する音楽の両方をリアルタイムで視覚化しました」と説明しました。
「Duetでは、すべての人にとって音楽を包括的な体験にすることに全力を注いでおり、すべての子どもたち、そして自分を表現することに苦しんでいるすべての人が、真の創造的な自己を伝える機会を持てるようにしています！」
Duet BCIの未来
Jin氏らは、最大の課題は人工知能を使ってライブ音楽を生成する方法を考案することだったと語ります。
「私たちは当初、それは不可能であり、技術はまだ“そこ”に達していないと考えていました。ネット上でそれに関する情報は何も見つからず、EEGを使用できる別のアイデアにどのようにピボットするか、何時間も考えたこともありました」彼らは語りました。
「しかし、私たちは最終的にそれを突き破り、私たちの知る限り他にはどこにも存在しない、ライブAI音楽生成のまったく新しい方法を考案しました」とJin氏らは説明しました。「私たちのほとんどがこの種のハードウェアを扱うのが初めてで、コンピュータに適切に接続する際、多くの問題に直面しました。しかし、最終的にはすべてをスムーズに実行させることができたため、これをすべて機能させられたことは私たちにとって大きな偉業でした！」
Duetについてさらに詳しく知り、自分で試すためにGitHubのコードを確認するには、DevPostで全ストーリーをチェックしてください。
Emotivのメンバー全員より、チームの皆さん、おめでとうございます。私たちは皆さんをとても誇りに思います！
こちらもおすすめです：
すべての人にBCIイノベーションを
Emotivは、人類の向上のためのイノベーションを誇りをもって支援しています。脳波（EEG）やBCIプロジェクトのためにEmotiv製品を導入するための製品の貸し出し、寄付、または資金援助についてのお問い合わせは、いつでもお待ちしております。
お問い合わせ
USCバークレー校の才能ある学生グループが、革新的なBCI音楽プロジェクト「Duet」で、Cal Hacks 2024の最優秀賞を獲得しました。
Duetは、Epoc XヘッドセットとCortex API搭載のEmotivPROソフトウェアによって収集および翻訳されたリアルタイムの感情状態に基づいて、AIを使用して音楽を作曲します。
学生たちは、Duetがパーソナライズされた音楽体験を通じて、障害のある子どもや個人に効果的な音楽療法を提供することを望んでいます。
Emotivは、世界最大の大学ハッカソンであるCal Hacks 2024で最優秀賞を受賞した、USCバークレー校の学生であるJiahui Jin氏、Sophia Zhang氏、Daniel Wang氏、Justin Wu氏に心から祝意を表します。Jin氏らのBCIプロジェクト「Duet」は、リアルタイムの脳波パフォーマンスメトリクスを、AIが生成する音楽とビジュアルフィードバックに翻訳します。
Duet開発のインスピレーションは、発達障害のある子どもたちに音楽を教える際の課題に対処することでした。
チームは、「残念ながら、多くの子どもたちがコミュニケーションを図り、創造的に自己表現するために必要なツールを持たないまま取り残されています」と説明します。「そこで、Duetの出番です。EEG技術を活用することで、これらの子どもたちが音楽と関わる方法を変革し、彼らに声を与え、感情を共有する手段を提供することを目指しています。」
仕組み
Duetは人工知能（AI）を使用し、脳波を読み取ることで個人のリアルタイムの感情状態に基づいた音楽を作曲します。チームはEpoc Xヘッドセットを使用して脳波データをストリーミングし、Emotiv Cortex APIを使用してPython経由で処理しました。彼らの取り組みを支援するため、Emotivは学生たちにEEGハードウェアを貸し出し、PROサブスクリプションソフトウェアへの一時的なアクセスを提供しました。
Emotiv独自の機械学習が脳の活動を感情状態（パフォーマンスメトリクス）に分類し、GoogleのGemini LLMに入力して音楽を生成しました。固定されたルールに従う代わりに、Duetはライブの作曲家として機能し、感情、利用可能な楽器、そしてこれまでの出力に基づいて、次の数秒間の音楽を決定しました。
チームは、「Sonic Piがライブ音楽の再生を処理し、SingleStoreが低レイテンシーデータを管理し、私たちのNext.jsフロントエンドが脳波と対応する音楽の両方をリアルタイムで視覚化しました」と説明しました。
「Duetでは、すべての人にとって音楽を包括的な体験にすることに全力を注いでおり、すべての子どもたち、そして自分を表現することに苦しんでいるすべての人が、真の創造的な自己を伝える機会を持てるようにしています！」
Duet BCIの未来
Jin氏らは、最大の課題は人工知能を使ってライブ音楽を生成する方法を考案することだったと語ります。
「私たちは当初、それは不可能であり、技術はまだ“そこ”に達していないと考えていました。ネット上でそれに関する情報は何も見つからず、EEGを使用できる別のアイデアにどのようにピボットするか、何時間も考えたこともありました」彼らは語りました。
「しかし、私たちは最終的にそれを突き破り、私たちの知る限り他にはどこにも存在しない、ライブAI音楽生成のまったく新しい方法を考案しました」とJin氏らは説明しました。「私たちのほとんどがこの種のハードウェアを扱うのが初めてで、コンピュータに適切に接続する際、多くの問題に直面しました。しかし、最終的にはすべてをスムーズに実行させることができたため、これをすべて機能させられたことは私たちにとって大きな偉業でした！」
Duetについてさらに詳しく知り、自分で試すためにGitHubのコードを確認するには、DevPostで全ストーリーをチェックしてください。
Emotivのメンバー全員より、チームの皆さん、おめでとうございます。私たちは皆さんをとても誇りに思います！
こちらもおすすめです：
すべての人にBCIイノベーションを
Emotivは、人類の向上のためのイノベーションを誇りをもって支援しています。脳波（EEG）やBCIプロジェクトのためにEmotiv製品を導入するための製品の貸し出し、寄付、または資金援助についてのお問い合わせは、いつでもお待ちしております。
お問い合わせ
USCバークレー校の才能ある学生グループが、革新的なBCI音楽プロジェクト「Duet」で、Cal Hacks 2024の最優秀賞を獲得しました。
Duetは、Epoc XヘッドセットとCortex API搭載のEmotivPROソフトウェアによって収集および翻訳されたリアルタイムの感情状態に基づいて、AIを使用して音楽を作曲します。
学生たちは、Duetがパーソナライズされた音楽体験を通じて、障害のある子どもや個人に効果的な音楽療法を提供することを望んでいます。
Emotivは、世界最大の大学ハッカソンであるCal Hacks 2024で最優秀賞を受賞した、USCバークレー校の学生であるJiahui Jin氏、Sophia Zhang氏、Daniel Wang氏、Justin Wu氏に心から祝意を表します。Jin氏らのBCIプロジェクト「Duet」は、リアルタイムの脳波パフォーマンスメトリクスを、AIが生成する音楽とビジュアルフィードバックに翻訳します。
Duet開発のインスピレーションは、発達障害のある子どもたちに音楽を教える際の課題に対処することでした。
チームは、「残念ながら、多くの子どもたちがコミュニケーションを図り、創造的に自己表現するために必要なツールを持たないまま取り残されています」と説明します。「そこで、Duetの出番です。EEG技術を活用することで、これらの子どもたちが音楽と関わる方法を変革し、彼らに声を与え、感情を共有する手段を提供することを目指しています。」
仕組み
Duetは人工知能（AI）を使用し、脳波を読み取ることで個人のリアルタイムの感情状態に基づいた音楽を作曲します。チームはEpoc Xヘッドセットを使用して脳波データをストリーミングし、Emotiv Cortex APIを使用してPython経由で処理しました。彼らの取り組みを支援するため、Emotivは学生たちにEEGハードウェアを貸し出し、PROサブスクリプションソフトウェアへの一時的なアクセスを提供しました。
Emotiv独自の機械学習が脳の活動を感情状態（パフォーマンスメトリクス）に分類し、GoogleのGemini LLMに入力して音楽を生成しました。固定されたルールに従う代わりに、Duetはライブの作曲家として機能し、感情、利用可能な楽器、そしてこれまでの出力に基づいて、次の数秒間の音楽を決定しました。
チームは、「Sonic Piがライブ音楽の再生を処理し、SingleStoreが低レイテンシーデータを管理し、私たちのNext.jsフロントエンドが脳波と対応する音楽の両方をリアルタイムで視覚化しました」と説明しました。
「Duetでは、すべての人にとって音楽を包括的な体験にすることに全力を注いでおり、すべての子どもたち、そして自分を表現することに苦しんでいるすべての人が、真の創造的な自己を伝える機会を持てるようにしています！」
Duet BCIの未来
Jin氏らは、最大の課題は人工知能を使ってライブ音楽を生成する方法を考案することだったと語ります。
「私たちは当初、それは不可能であり、技術はまだ“そこ”に達していないと考えていました。ネット上でそれに関する情報は何も見つからず、EEGを使用できる別のアイデアにどのようにピボットするか、何時間も考えたこともありました」彼らは語りました。
「しかし、私たちは最終的にそれを突き破り、私たちの知る限り他にはどこにも存在しない、ライブAI音楽生成のまったく新しい方法を考案しました」とJin氏らは説明しました。「私たちのほとんどがこの種のハードウェアを扱うのが初めてで、コンピュータに適切に接続する際、多くの問題に直面しました。しかし、最終的にはすべてをスムーズに実行させることができたため、これをすべて機能させられたことは私たちにとって大きな偉業でした！」
Duetについてさらに詳しく知り、自分で試すためにGitHubのコードを確認するには、DevPostで全ストーリーをチェックしてください。
Emotivのメンバー全員より、チームの皆さん、おめでとうございます。私たちは皆さんをとても誇りに思います！
こちらもおすすめです：
すべての人にBCIイノベーションを
Emotivは、人類の向上のためのイノベーションを誇りをもって支援しています。脳波（EEG）やBCIプロジェクトのためにEmotiv製品を導入するための製品の貸し出し、寄付、または資金援助についてのお問い合わせは、いつでもお待ちしております。
お問い合わせ
読むのを続ける