StabilityAI lucrează la tehnologie pentru a genera imagini doar prin gândire; nu sunt necesare solicitări: MindEye

Pictograma timp de citire 2 min. citit


Cititorii ajută la sprijinirea MSpoweruser. Este posibil să primim un comision dacă cumpărați prin link-urile noastre. Pictograma Tooltip

Citiți pagina noastră de dezvăluire pentru a afla cum puteți ajuta MSPoweruser să susțină echipa editorială Află mai multe

Note cheie

  • MindEye, un nou sistem reconstruiește și preia imagini direct din scanările creierului.
  • MindEye realizează o precizie ridicată atât în ​​recuperarea imaginilor originale, cât și în generarea de reconstrucții.

Cu doar un an în urmă, generarea de imagini prin solicitări a fost cel mai mare lucru din lume. Toată lumea vorbea despre asta, iar acum se pare că va fi în curând un lucru din trecut. MindEye de la StabilityAI este o nouă abordare pentru reconstruirea și recuperarea imaginilor direct din activitatea creierului fMRI. Pe de altă parte, Noul model AI al lui Stability AI poate transforma imaginile 2D în videoclipuri 3D.

Imagistica prin rezonanță magnetică funcțională (fMRI) este o tehnică de neuroimagistică care măsoară activitatea creierului prin detectarea modificărilor fluxului sanguin. Rolul acestei tehnologii este de a mapa funcția creierului și de a evalua potențiale tratamente pentru afecțiuni neurologice.

MindEye se bazează pe un set de date de înregistrări ale activității creierului de la participanții care au vizualizat o serie de imagini statice într-un scaner RMN. Echipa de cercetare a instruit sistemul să analizeze aceste înregistrări și fie să preia imaginea originală dintr-un grup de candidați (recuperare), fie să genereze o reconstrucție a imaginii vizualizate.

Cercetătorii au demonstrat capacitatea MindEye de a depăși metodele anterioare în sarcinile de recuperare a imaginilor, obținând o precizie de peste 90% în identificarea imaginii originale dintr-un grup de candidați. Pentru reconstrucție, MindEye folosește modele generative pre-antrenate

MindEye poate fi aplicat în diverse domenii. În domeniul medical, capacitatea sa de a reconstrui percepția vizuală din activitatea creierului ar putea permite metode de diagnostic și evaluare, în special în cazurile în care pacienții se luptă cu comunicarea. Potențialul MindEye pentru analiză în timp real caută o performanță îmbunătățită a interfeței creier-calculator.

Echipa evidențiază limitările asociate cu colectarea datelor, inclusiv timpii lungi de scanare necesari și potențialul de date zgomotoase din cauza mișcării sau neatenției participanților.

Mai Mult aici.