StabilityAI는 생각만으로 이미지를 생성하는 기술을 연구하고 있습니다. 프롬프트가 필요하지 않습니다: MindEye

불과 1년 전만 해도 프롬프트를 통한 이미지 생성이 세상에서 가장 큰 일이었습니다. 다들 얘기만 하던데요, 이제 곧 옛말이 될 것 같았습니다. StabilityAI의 MindEye는 fMRI 뇌 활동에서 직접 이미지를 재구성하고 검색하는 새로운 접근 방식입니다. 반면에, Stability AI의 새로운 AI 모델은 2D 이미지를 3D 비디오로 변환할 수 있습니다.

기능적 자기공명영상(fMRI)은 혈류의 변화를 감지하여 뇌 활동을 측정하는 신경 영상 기술입니다. 이 기술의 역할은 뇌 기능을 지도화하고 신경 질환에 대한 잠재적 치료법을 평가하는 것입니다.

MindEye는 MRI 스캐너 내에서 일련의 정적 이미지를 본 참가자의 뇌 활동 기록 데이터 세트를 기반으로 합니다. 연구팀은 이러한 녹음 내용을 분석하고 후보 풀에서 원본 이미지를 검색하거나(검색) 본 이미지를 재구성하도록 시스템을 교육했습니다.

연구원들은 이미지 검색 작업에서 이전 방법을 능가하는 MindEye의 능력을 입증했으며, 후보 풀에서 원본 이미지를 식별하는 데 90% 이상의 정확도를 달성했습니다. 재구성을 위해 MindEye는 사전 훈련된 생성 모델을 사용합니다.

MindEye는 다양한 분야에 걸쳐 적용될 수 있습니다. 의료 분야에서는 뇌 활동을 통해 시각적 인식을 재구성하는 능력을 통해 특히 환자가 의사소통에 어려움을 겪는 경우 진단 및 평가 방법이 가능해질 수 있습니다. 실시간 분석에 대한 MindEye의 잠재력은 향상된 뇌-컴퓨터 인터페이스 성능을 찾습니다.

팀은 필요한 스캔 시간이 길고 참가자의 움직임이나 부주의로 인해 데이터에 노이즈가 발생할 가능성을 포함하여 데이터 수집과 관련된 제한 사항을 강조합니다.

더 보기 여기를 클릭해 문의해주세요.