StabilityAI työskentelee tekniikan parissa kuvien luomiseksi pelkällä ajattelulla; kehotteita ei tarvita: MindEye
2 min. lukea
Julkaistu
Jaa tämä artikkeli
Paranna tätä ohjetta
Lue ilmoitussivumme saadaksesi selville, kuinka voit auttaa MSPoweruseria ylläpitämään toimitustiimiä Lue lisää
Keskeiset huomautukset
- MindEye, uusi järjestelmä rekonstruoi ja hakee kuvia suoraan aivoskannauksista.
- MindEye saavuttaa suuren tarkkuuden sekä alkuperäisten kuvien hakemisessa että rekonstruktioiden luomisessa.
Vielä vuosi sitten kuvien luominen kehotteilla oli maailman suurin asia. Kaikki puhuivat siitä, ja nyt näyttää siltä, että se on pian menneisyyttä. StabilityAI:n MindEye on uusi lähestymistapa kuvien rekonstruoimiseen ja hakemiseen suoraan fMRI-aivotoiminnasta. Toisaalta, Vakaus AI:n uusi tekoälymalli voi muuttaa 2D-kuvat 3D-videoiksi.
Funktionaalinen magneettikuvaus (fMRI) on hermokuvaustekniikka, joka mittaa aivojen toimintaa havaitsemalla muutoksia verenkierrossa. Tämän tekniikan tehtävänä on kartoittaa aivojen toimintaa ja arvioida mahdollisia hoitoja neurologisiin sairauksiin.
MindEye perustuu aivotoiminnan tallennuksiin osallistujilta, jotka katselivat sarjaa staattisia kuvia MRI-skannerin sisällä. Tutkimusryhmä koulutti järjestelmän analysoimaan nämä tallenteet ja joko hakemaan alkuperäisen kuvan ehdokkaiden joukosta (haku) tai luomaan rekonstruktio katsotusta kuvasta.
Tutkijat osoittivat MindEyen kyvyn ylittää aiemmat menetelmät kuvanhakutehtävissä saavuttaen yli 90 % tarkkuuden alkuperäisen kuvan tunnistamisessa ehdokkaiden joukosta. Rekonstruoinnissa MindEye käyttää esikoulutettuja generatiivisia malleja
MindEyeä voidaan soveltaa useilla eri aloilla. Lääketieteen alalla sen kyky rekonstruoida visuaalinen havainto aivojen toiminnasta saattaa mahdollistaa diagnostiset ja arviointimenetelmät, erityisesti tapauksissa, joissa potilaat kamppailevat kommunikoinnin kanssa. MindEyen reaaliaikaisen analyysin mahdollisuudet etsivät parannettua aivojen ja tietokoneiden käyttöliittymän suorituskykyä.
Tiimi korostaa tiedonkeruun rajoituksia, mukaan lukien vaaditut pitkät skannausajat ja mahdollisuus meluiseen dataan osallistujien liikkeen tai tarkkaavaisuuden vuoksi.
Lisää: tästä.
