MinD-Vis는 사용자가 마음으로 메타버스에 있는 것을 제어할 수 있다는 아이디어를 바탕으로 가상현실 헤드셋에 통합되도록 개발될 수 있다.

싱가포르의 연구원들은 뇌파 패턴을 해독하고 사람이 보고 있는 것을 결정하는 이미지를 생성하는 AI 시스템을 개발했다. 연구팀은 MRI 스캔을 받는 동안 동물, 음식, 건물 및 인간 활동에 대한 1,200~5,000개의 다양한 이미지에 노출된 약 58명의 참가자의 뇌 스캔 데이터 세트를 수집하고 있다. 각각은 중간에 휴식 시간을 포함하여 9초 동안 지속된다.

MinD-Vis라고 불리는 마음을 읽는 AI는 뇌 스캔을 이미지와 일치시켜 각 참가자에 대한 개별 AI 모델을 생성한다. 이러한 모델을 통해 컴퓨터는 생각을 "읽고" 사람이 보고 있는 시각적인 내용을 재현할 수 있다.

"ChatGPT가 인간의 자연어를 이해하는 것처럼 두뇌 활동을 이해할 수 있다. 그런 다음 Stable Diffusion(텍스트에서 이미지를 생성하는 오픈 소스 AI)이 이해할 수 있는 언어로 두뇌 활동을 번역한다."고 이번 연구의 수석 연구원 중 한 명이자 홍콩 중문 대학교(CUHK IE)의 박사 과정 학생인 Jiaxin Qing이 말했다.

Qing에 따르면, 디코딩 된 이미지는 참가자에게 표시된 것과 지속적으로 유사했다.

Li Ruilin은 참가자 중 한 명으로 뇌 해독에 매료되었다.

"자연적인 양식을 생성하기 위해 뇌 신호를 사용하는 것과 같은 뇌 해독은 매우 흥미로운 작업이다. 또한 내 뇌에서 무슨 일이 일어났는지, 내 뇌가 무엇을 출력할 수 있는지, 내가 생각하는 것에 관심이 있다."라고 Ruilin은 말했다.

이 기술은 미래에 사람들을 돕기 위해 적용될 수 있다고 연구팀은 말한다.

"운동 능력이 없는 일부 환자의 경우, 로봇(인공 팔다리)을 제어하도록 도울 수 있을 수도 있다... (또는) 그 사람이 당시 말을 할 수 없다면 말 대신 생각을 사용하는 것처럼 다른 사람과 의사소통할 수 있다."고 싱가포르 국립대학교 의과대학의 Chen Zijiao 박사는 말했다.

Chen은 이 기술을 가상현실 헤드셋에 통합하도록 개발할 수도 있으므로 사용자는 물리적 컨트롤러 대신 마음으로 메타버스에 있는 것을 제어할 수 있다고 덧붙였다.

미래의 과제

연구원들은 이제 마음을 읽는 AI의 개발이 MRI 데이터 세트 수집의 용이성과 데이터를 처리할 수 있는 계산 능력의 최근 발전 덕분이라고 말한다.

그러나 팀에 따르면 MinD-Vis가 대중의 마음을 읽으려면 수년의 발전이 필요할 것이라고 한다.

"우리는 지금 가능성을 테스트하려고 노력하고 있지만 현재 사용 가능한 데이터 세트, 우리가 가지고 있는 계산 능력, 뇌 해부학의 거대한 이질성 또는 개인 간 차이 및 뇌 기능; 이것은 매우 어려울 것이다."라고 싱가포르 국립대학교의 부교수인 Juan Helen Zhou가 말했다.

AI가 학습한 데이터세트가 동의 없이 공유될 위험도 있다. 연구원들은 또한 AI 연구에 대한 법률이 상대적으로 부족한 것이 발전에 방해가 될 수 있다는 점을 인정했다.

"개인 정보 보호에 대한 우려가 가장 먼저 중요하며 그 다음에는 우리가 여기에 제공한 정보가 사전 동의 없이 평가되거나 공유될 수 있는지 여부에 대해 사람들이 걱정할 수 있다. 따라서 이를 해결해야 하는 것은 우리가 매우 엄격한 지침, 윤리적, 법률적 측면을 갖추어야 한다는 것이다. 개인 정보를 보호하는 방법에 대해 설명한다."라고 Zhou는 말했다.