• Một nhóm sinh viên tài năng tại USC Berkley đã giành giải nhất tại Cal Hacks 2024 cho dự án âm nhạc BCI sáng tạo của họ, “Duet.”

• Duet sử dụng AI để sáng tác nhạc dựa trên trạng thái cảm xúc theo thời gian thực, được thu thập và chuyển đổi bởi tai nghe Emotiv Epoc X và phần mềm EmotivPRO với Cortex API.

• Các sinh viên hy vọng Duet sẽ mang đến liệu pháp âm nhạc hiệu quả cho trẻ em và những người khuyết tật thông qua những trải nghiệm âm nhạc cá nhân hóa.

Emotiv xin gửi lời chúc mừng chân thành đến các sinh viên USC Berkley Jiahui Jin, Sophia Zhang, Daniel Wang và Justin Wu vì đã giành giải nhất tại Cal Hacks 2024, cuộc thi hackathon đại học lớn nhất thế giới. Dự án BCI Duet của Jin và cộng sự chuyển đổi các chỉ số hiệu suất sóng não theo thời gian thực thành âm nhạc và phản hồi trực quan do AI tạo ra.

Nguồn cảm hứng cho Duet là đáp ứng những thách thức trong việc dạy nhạc cho trẻ em có khuyết tật phát triển.

“Không may là nhiều trẻ em không có công cụ cần thiết để giao tiếp và thể hiện bản thân một cách sáng tạo,” nhóm giải thích. “Đó là nơi Duet xuất hiện. Bằng cách tận dụng công nghệ EEG, chúng tôi hướng tới việc thay đổi cách những đứa trẻ này tương tác với âm nhạc, mang đến cho các em một tiếng nói và một phương tiện để chia sẻ cảm xúc của mình.”

Cách hoạt động

Duet sử dụng trí tuệ nhân tạo để sáng tác nhạc dựa trên trạng thái cảm xúc theo thời gian thực của một người bằng cách đọc sóng não. Nhóm đã dùng tai nghe Emotiv Epoc X để truyền dữ liệu sóng não và xử lý qua Python với Emotiv Cortex API. Để hỗ trợ họ trong nỗ lực này, Emotiv đã sắp xếp cho các sinh viên mượn phần cứng EEG và cấp quyền truy cập tạm thời vào phần mềm gói PRO của mình.

Công nghệ học máy độc quyền của Emotiv phân loại hoạt động não thành các trạng thái cảm xúc (chỉ số hiệu suất), rồi đưa vào LLM Gemini của Google để tạo nhạc. Thay vì tuân theo các quy tắc cố định, Duet hoạt động như một nhà soạn nhạc trực tiếp, quyết định vài giây tiếp theo của bản nhạc dựa trên cảm xúc, các nhạc cụ sẵn có và đầu ra trước đó.

Sonic Pi xử lý việc phát nhạc trực tiếp, SingleStore quản lý dữ liệu độ trễ thấp, và giao diện Next.js của chúng tôi hiển thị cả sóng não lẫn bản nhạc tương ứng theo thời gian thực, đội ngũ cho biết.

“Tại Duet, chúng tôi cam kết biến âm nhạc thành một trải nghiệm hòa nhập cho tất cả mọi người, đảm bảo rằng mọi đứa trẻ—và bất kỳ ai gặp khó khăn trong việc thể hiện bản thân—đều có cơ hội truyền tải con người sáng tạo đích thực của mình!”

Tương lai của Duet BCI

Jin và cộng sự cho biết thách thức lớn nhất của họ là tìm ra cách tạo nhạc trực tiếp bằng trí tuệ nhân tạo.

“Ban đầu, chúng tôi nghĩ điều đó là không thể và công nghệ vẫn chưa ‘đủ sẵn sàng’ — chúng tôi không tìm thấy bất cứ thứ gì trên mạng về nó, và thậm chí đã dành hàng giờ để nghĩ cách chuyển sang một ý tưởng khác mà chúng tôi có thể dùng EEG của mình cho,” họ nói.

“Tuy nhiên, cuối cùng chúng tôi vẫn kiên trì vượt qua và nghĩ ra một phương pháp hoàn toàn mới để tạo nhạc AI trực tiếp mà, theo hiểu biết của chúng tôi, chưa từng tồn tại ở nơi nào khác,” Jin và cộng sự giải thích. “Phần lớn chúng tôi đều là lần đầu làm việc với loại phần cứng này, và chúng tôi đã gặp rất nhiều vấn đề khi làm cho nó kết nối đúng cách với máy tính của mình — nhưng cuối cùng, chúng tôi đã khiến mọi thứ chạy trơn tru, vì vậy việc làm cho tất cả hoạt động được là một thành tựu rất lớn đối với chúng tôi!”

Để tìm hiểu thêm về Duet và xem mã nguồn trên GitHub để tự mình thử, xem toàn bộ câu chuyện trên DevPost.

Từ tất cả chúng tôi tại Emotiv - chúc mừng đội ngũ, chúng tôi rất tự hào về các bạn!

Bạn cũng có thể thích:

• Chương trình BCI này kết nối trẻ em khuyết tật với thế giới của các em

• Liệu pháp phản hồi thần kinh âm nhạc để điều trị trầm cảm ở người cao tuổi

• Giao diện não - máy tính âm nhạc: Cách điều khiển Spotify bằng tâm trí của bạn

Đổi mới BCI cho mọi người

Emotiv tự hào hỗ trợ đổi mới vì lợi ích của nhân loại. Nếu bạn muốn hỏi về việc mượn sản phẩm, quyên góp hoặc hỗ trợ tài chính để có được các sản phẩm Emotiv cho dự án EEG hoặc BCI của mình, chúng tôi rất mong nhận được liên hệ từ bạn.

Liên hệ với chúng tôi