デュエット：ブレインウェーブ音楽BCIプロジェクトがCal Hacks 2024で優勝
ハイディ・デュラン
更新日
2024/10/21
デュエット：ブレインウェーブ音楽BCIプロジェクトがCal Hacks 2024で優勝
ハイディ・デュラン
更新日
2024/10/21
デュエット：ブレインウェーブ音楽BCIプロジェクトがCal Hacks 2024で優勝
ハイディ・デュラン
更新日
2024/10/21
USCバークレーの才能ある学生グループが、革新的なBCI音楽プロジェクト「Duet」で Cal Hacks 2024 の最優秀賞を受賞しました。
Duetは、Emotiv Epoc XヘッドセットとEmotivPROソフトウェア、そしてCortex APIによって収集・変換されたリアルタイムの感情状態に基づいて、AIで音楽を作曲します。
学生たちは、Duetが個別化された音楽体験を通じて、子どもや障害のある人々に効果的な音楽療法を提供できることを願っています。
Emotivは、USCバークレーの学生であるJiahui Jin、Sophia Zhang、Daniel Wang、Justin Wuの皆さんが、世界最大の大学対抗ハッカソンであるCal Hacks 2024で最優秀賞を受賞したことに、心からお祝いを申し上げます。JinらのBCIプロジェクトであるDuetは、リアルタイムの脳波のパフォーマンス指標をAI生成の音楽と視覚的フィードバックに変換します。
Duetの着想は、発達障害のある子どもたちに音楽を教える際の課題に対応することでした。
「残念ながら、多くの子どもたちは、自分を表現し、創造的に伝えるために必要な手段を持たないまま取り残されています」とチームは説明します。「そこでDuetの出番です。EEG技術を活用することで、これらの子どもたちが音楽と関わる方法を変革し、声を持ち、自分の気持ちを伝える手段を与えたいと考えています。」
仕組み
Duetは、脳波を読み取って人のリアルタイムの感情状態に基づき、人工知能で音楽を作曲します。チームはEmotiv Epoc Xヘッドセットを使って脳波データをストリーミングし、PythonとEmotiv Cortex APIで処理しました。取り組みを支援するため、Emotivは学生たちにEEGハードウェアを貸与し、PROサブスクリプションソフトウェアへの一時的なアクセスを提供しました。
Emotiv独自の機械学習が脳の活動を感情状態（パフォーマンス指標）に分類し、それをGoogleのGemini LLMに入力して音楽を生成しました。固定されたルールに従う代わりに、Duetはライブ作曲家のように振る舞い、感情、利用可能な楽器、以前の出力に基づいて次の数秒の音楽を決定しました。
Sonic Piがライブ再生を担い、SingleStoreが低遅延データを管理し、私たちのNext.jsフロントエンドが脳波とそれに対応する音楽の両方をリアルタイムで可視化したと、チームは説明しました。
「Duetでは、すべての人にとって音楽を包摂的な体験にすることを使命としています。すべての子ども、そして自分を表現するのが難しいすべての人が、本来の創造的な自分を伝える機会を持てるようにしたいのです！」
Duet BCIの未来
Jinらは、人工知能を使ってライブ音楽を生成する方法を考え出すことが最大の課題だったと述べています。
「最初は不可能だと思っていて、まだ“そこまで”の技術ではないと考えていました。オンラインでそのようなものを見つけることもできず、私たちのEEGを使える別のアイデアに切り替える方法を何時間も考えました」と彼らは述べました。
「しかし、最終的にはやり抜き、私たちの知る限り他には存在しない、ライブAI音楽生成のまったく新しい方法を考案しました」とJinらは説明しました。「この種のハードウェアを扱うのは私たちのほとんどが初めてで、コンピューターに正しく接続するのに多くの問題がありましたが、最後にはすべてがスムーズに動くようになり、全体を機能させることができたのは私たちにとって大きな成果でした！」
Duetについてさらに知り、GitHubでコードを見て自分でも試してみたい方は、DevPostの全文をご覧ください。
Emotiv一同より - おめでとうございます、チームの皆さん。とても誇りに思います！
こちらもおすすめ：
すべての人のためのBCIイノベーション
Emotivは、人類のより良い未来のためのイノベーションを誇りを持って支援しています。EEGまたはBCIプロジェクトのためにEmotiv製品を入手するにあたり、製品貸与、寄付、または資金援助についてお問い合わせをご希望でしたら、ぜひご連絡ください。
お問い合わせ
USCバークレーの才能ある学生グループが、革新的なBCI音楽プロジェクト「Duet」で Cal Hacks 2024 の最優秀賞を受賞しました。
Duetは、Emotiv Epoc XヘッドセットとEmotivPROソフトウェア、そしてCortex APIによって収集・変換されたリアルタイムの感情状態に基づいて、AIで音楽を作曲します。
学生たちは、Duetが個別化された音楽体験を通じて、子どもや障害のある人々に効果的な音楽療法を提供できることを願っています。
Emotivは、USCバークレーの学生であるJiahui Jin、Sophia Zhang、Daniel Wang、Justin Wuの皆さんが、世界最大の大学対抗ハッカソンであるCal Hacks 2024で最優秀賞を受賞したことに、心からお祝いを申し上げます。JinらのBCIプロジェクトであるDuetは、リアルタイムの脳波のパフォーマンス指標をAI生成の音楽と視覚的フィードバックに変換します。
Duetの着想は、発達障害のある子どもたちに音楽を教える際の課題に対応することでした。
「残念ながら、多くの子どもたちは、自分を表現し、創造的に伝えるために必要な手段を持たないまま取り残されています」とチームは説明します。「そこでDuetの出番です。EEG技術を活用することで、これらの子どもたちが音楽と関わる方法を変革し、声を持ち、自分の気持ちを伝える手段を与えたいと考えています。」
仕組み
Duetは、脳波を読み取って人のリアルタイムの感情状態に基づき、人工知能で音楽を作曲します。チームはEmotiv Epoc Xヘッドセットを使って脳波データをストリーミングし、PythonとEmotiv Cortex APIで処理しました。取り組みを支援するため、Emotivは学生たちにEEGハードウェアを貸与し、PROサブスクリプションソフトウェアへの一時的なアクセスを提供しました。
Emotiv独自の機械学習が脳の活動を感情状態（パフォーマンス指標）に分類し、それをGoogleのGemini LLMに入力して音楽を生成しました。固定されたルールに従う代わりに、Duetはライブ作曲家のように振る舞い、感情、利用可能な楽器、以前の出力に基づいて次の数秒の音楽を決定しました。
Sonic Piがライブ再生を担い、SingleStoreが低遅延データを管理し、私たちのNext.jsフロントエンドが脳波とそれに対応する音楽の両方をリアルタイムで可視化したと、チームは説明しました。
「Duetでは、すべての人にとって音楽を包摂的な体験にすることを使命としています。すべての子ども、そして自分を表現するのが難しいすべての人が、本来の創造的な自分を伝える機会を持てるようにしたいのです！」
Duet BCIの未来
Jinらは、人工知能を使ってライブ音楽を生成する方法を考え出すことが最大の課題だったと述べています。
「最初は不可能だと思っていて、まだ“そこまで”の技術ではないと考えていました。オンラインでそのようなものを見つけることもできず、私たちのEEGを使える別のアイデアに切り替える方法を何時間も考えました」と彼らは述べました。
「しかし、最終的にはやり抜き、私たちの知る限り他には存在しない、ライブAI音楽生成のまったく新しい方法を考案しました」とJinらは説明しました。「この種のハードウェアを扱うのは私たちのほとんどが初めてで、コンピューターに正しく接続するのに多くの問題がありましたが、最後にはすべてがスムーズに動くようになり、全体を機能させることができたのは私たちにとって大きな成果でした！」
Duetについてさらに知り、GitHubでコードを見て自分でも試してみたい方は、DevPostの全文をご覧ください。
Emotiv一同より - おめでとうございます、チームの皆さん。とても誇りに思います！
こちらもおすすめ：
すべての人のためのBCIイノベーション
Emotivは、人類のより良い未来のためのイノベーションを誇りを持って支援しています。EEGまたはBCIプロジェクトのためにEmotiv製品を入手するにあたり、製品貸与、寄付、または資金援助についてお問い合わせをご希望でしたら、ぜひご連絡ください。
お問い合わせ
USCバークレーの才能ある学生グループが、革新的なBCI音楽プロジェクト「Duet」で Cal Hacks 2024 の最優秀賞を受賞しました。
Duetは、Emotiv Epoc XヘッドセットとEmotivPROソフトウェア、そしてCortex APIによって収集・変換されたリアルタイムの感情状態に基づいて、AIで音楽を作曲します。
学生たちは、Duetが個別化された音楽体験を通じて、子どもや障害のある人々に効果的な音楽療法を提供できることを願っています。
Emotivは、USCバークレーの学生であるJiahui Jin、Sophia Zhang、Daniel Wang、Justin Wuの皆さんが、世界最大の大学対抗ハッカソンであるCal Hacks 2024で最優秀賞を受賞したことに、心からお祝いを申し上げます。JinらのBCIプロジェクトであるDuetは、リアルタイムの脳波のパフォーマンス指標をAI生成の音楽と視覚的フィードバックに変換します。
Duetの着想は、発達障害のある子どもたちに音楽を教える際の課題に対応することでした。
「残念ながら、多くの子どもたちは、自分を表現し、創造的に伝えるために必要な手段を持たないまま取り残されています」とチームは説明します。「そこでDuetの出番です。EEG技術を活用することで、これらの子どもたちが音楽と関わる方法を変革し、声を持ち、自分の気持ちを伝える手段を与えたいと考えています。」
仕組み
Duetは、脳波を読み取って人のリアルタイムの感情状態に基づき、人工知能で音楽を作曲します。チームはEmotiv Epoc Xヘッドセットを使って脳波データをストリーミングし、PythonとEmotiv Cortex APIで処理しました。取り組みを支援するため、Emotivは学生たちにEEGハードウェアを貸与し、PROサブスクリプションソフトウェアへの一時的なアクセスを提供しました。
Emotiv独自の機械学習が脳の活動を感情状態（パフォーマンス指標）に分類し、それをGoogleのGemini LLMに入力して音楽を生成しました。固定されたルールに従う代わりに、Duetはライブ作曲家のように振る舞い、感情、利用可能な楽器、以前の出力に基づいて次の数秒の音楽を決定しました。
Sonic Piがライブ再生を担い、SingleStoreが低遅延データを管理し、私たちのNext.jsフロントエンドが脳波とそれに対応する音楽の両方をリアルタイムで可視化したと、チームは説明しました。
「Duetでは、すべての人にとって音楽を包摂的な体験にすることを使命としています。すべての子ども、そして自分を表現するのが難しいすべての人が、本来の創造的な自分を伝える機会を持てるようにしたいのです！」
Duet BCIの未来
Jinらは、人工知能を使ってライブ音楽を生成する方法を考え出すことが最大の課題だったと述べています。
「最初は不可能だと思っていて、まだ“そこまで”の技術ではないと考えていました。オンラインでそのようなものを見つけることもできず、私たちのEEGを使える別のアイデアに切り替える方法を何時間も考えました」と彼らは述べました。
「しかし、最終的にはやり抜き、私たちの知る限り他には存在しない、ライブAI音楽生成のまったく新しい方法を考案しました」とJinらは説明しました。「この種のハードウェアを扱うのは私たちのほとんどが初めてで、コンピューターに正しく接続するのに多くの問題がありましたが、最後にはすべてがスムーズに動くようになり、全体を機能させることができたのは私たちにとって大きな成果でした！」
Duetについてさらに知り、GitHubでコードを見て自分でも試してみたい方は、DevPostの全文をご覧ください。
Emotiv一同より - おめでとうございます、チームの皆さん。とても誇りに思います！
こちらもおすすめ：
すべての人のためのBCIイノベーション
Emotivは、人類のより良い未来のためのイノベーションを誇りを持って支援しています。EEGまたはBCIプロジェクトのためにEmotiv製品を入手するにあたり、製品貸与、寄付、または資金援助についてお問い合わせをご希望でしたら、ぜひご連絡ください。
