• Một nhóm sinh viên tài năng tại USC Berkley đã giành giải nhất tại Cal Hacks 2024 nhờ dự án âm nhạc BCI đầy sáng tạo của họ mang tên "Duet."

• Duet sử dụng AI để sáng tác âm nhạc dựa trên trạng thái cảm xúc theo thời gian thực được thu thập và chuyển dịch bởi thiết bị đeo đầu Emotiv Epoc X và phần mềm EmotivPRO với Cortex API.

• Các sinh viên hy vọng Duet sẽ mang lại liệu pháp âm nhạc hiệu quả cho trẻ em và những người khuyết tật thông qua các trải nghiệm âm nhạc được cá nhân hóa.

Emotiv gửi lời chúc mừng nồng nhiệt nhất đến các sinh viên USC Berkley bao gồm Jiahui Jin, Sophia Zhang, Daniel Wang, và Justin Wu vì đã giành giải nhất tại Cal Hacks 2024, cuộc thi hackathon dành cho sinh viên lớn nhất thế giới. Dự án BCI của Jin và các cộng sự, Duet, chuyển dịch các chỉ số hiệu suất sóng não trong thời gian thực thành âm nhạc do AI tạo ra và phản hồi trực quan.

Nguồn cảm hứng cho Duet là nhằm giải quyết những thách thức trong việc dạy âm nhạc cho trẻ em khuyết tật phát triển.

"Thật không may, nhiều trẻ em không có các công cụ cần thiết để giao tiếp và thể hiện bản thân một cách sáng tạo," nhóm giải thích. "Đó là lý do Duet ra đời. Bằng cách sử dụng công nghệ EEG, chúng tôi đặt mục tiêu thay đổi cách những đứa trẻ này tương tác với âm nhạc, mang lại cho các em một tiếng nói và phương tiện để chia sẻ cảm xúc của mình."

Cách Thức Hoạt Động

Duet sử dụng trí tuệ nhân tạo để sáng tác âm nhạc dựa trên trạng thái cảm xúc theo thời gian thực của một người bằng cách đọc sóng não. Nhóm nghiên cứu đã sử dụng thiết bị đeo đầu Emotiv Epoc X để truyền dữ liệu sóng não và xử lý dữ liệu đó qua Python với Emotiv Cortex API. Để hỗ trợ họ trong nỗ lực này, Emotiv đã sắp xếp cho các sinh viên mượn phần cứng EEG và cấp quyền truy cập tạm thời vào phần mềm đăng ký PRO của mình.

Công nghệ học máy độc quyền của Emotiv đã phân loại hoạt động não bộ thành các trạng thái cảm xúc (chỉ số hiệu suất), sau đó đưa vào mô hình Gemini LLM của Google để tạo ra âm nhạc. Thay vì tuân theo các quy tắc cố định, Duet hoạt động như một nhà soạn nhạc trực tiếp, quyết định vài giây âm nhạc tiếp theo dựa trên cảm xúc, các nhạc cụ có sẵn và các kết quả đầu ra trước đó.

Sonic Pi đảm nhận việc phát lại nhạc trực tiếp, SingleStore quản lý dữ liệu có độ trễ thấp, và giao diện Next.js của chúng tôi trực quan hóa cả sóng não và âm nhạc tương ứng trong thời gian thực, nhóm giải thích.

"Tại Duet, chúng tôi cam kết biến âm nhạc thành một trải nghiệm hòa nhập cho tất cả mọi người, đảm bảo rằng mọi trẻ em—và bất kỳ ai gặp khó khăn trong việc thể hiện bản thân—đều có cơ hội truyền tải bản thân sáng tạo thực sự của mình!"

Tương Lai Của Duet BCI

Jin và các cộng sự cho biết thử thách lớn nhất của họ là tìm ra cách tạo ra âm nhạc trực tiếp bằng trí tuệ nhân tạo.

"Ban đầu chúng tôi nghĩ điều đó là không thể và công nghệ vẫn chưa "đạt đến mức đó" — chúng tôi không thể tìm thấy bất kỳ thông tin nào trên mạng về việc này, và thậm chí đã dành hàng giờ để suy nghĩ về cách chuyển sang một ý tưởng khác mà chúng tôi có thể sử dụng thiết bị EEG của mình," họ chia sẻ.

"Tuy nhiên, cuối cùng chúng tôi đã vượt qua và nghĩ ra một phương pháp hoàn toàn mới để tạo nhạc AI trực tiếp mà theo hiểu biết của chúng tôi là chưa từng tồn tại ở bất kỳ nơi nào khác," Jin và các cộng sự giải thích. "Đây là lần đầu tiên hầu hết chúng tôi làm việc với loại phần cứng này, và chúng tôi đã gặp nhiều sự cố khi kết nối nó với máy tính một cách ổn định — nhưng cuối cùng, chúng tôi đã giúp mọi thứ vận hành trơn tru, vì vậy việc làm cho tất cả hoạt động được là một kỳ tích lớn đối với chúng tôi!"

Để tìm hiểu thêm về Duet và xem mã nguồn trên GitHub để tự mình trải nghiệm, hãy xem toàn bộ câu chuyện trên DevPost.

Từ tất cả chúng tôi tại Emotiv - xin chúc mừng cả nhóm, chúng tôi rất tự hào về các bạn!

Có thể bạn cũng sẽ thích:

• Chương Trình BCI Này Kết Nối Trẻ Em Khuyết Tật Với Thế Giới Của Các Em

• Liệu Pháp Phản Hồi Thần Kinh Âm Nhạc Trong Điều Trị Trầm Cảm Ở Người Cao Tuổi

• Giao Diện Não Máy Tính Âm Nhạc: Cách Điều Khiển Spotify Bằng Tâm Trí Của Bạn

Đổi Mới BCI Dành Cho Tất Cả Mọi Người

Emotiv tự hào hỗ trợ đổi mới sáng tạo vì sự tiến bộ của nhân loại. Nếu bạn muốn hỏi về việc mượn sản phẩm, quyên góp hoặc hỗ trợ tài chính để có được các sản phẩm Emotiv cho dự án EEG hoặc BCI của mình, chúng tôi rất mong nhận được thông tin từ bạn.

Liên Hệ Với Chúng Tôi