StabilityAI працює над технологією генерації зображень просто мисленням; підказки не потрібні: MindEye
2 хв. читати
Опубліковано
Поділитися цією статтею
Удосконалити цей посібник
Прочитайте нашу сторінку розкриття інформації, щоб дізнатися, як ви можете допомогти MSPoweruser підтримувати редакційну команду Читати далі
Основні нотатки
- MindEye, нова система, реконструює та отримує зображення безпосередньо зі сканованих зображень мозку.
- MindEye забезпечує високу точність як при отриманні оригінальних зображень, так і при створенні реконструкцій.
Лише рік тому створення зображень за допомогою підказок було найбільшим у світі. Усі про це говорили, а тепер, здається, скоро це піде в минуле. MindEye від StabilityAI — це новий підхід для реконструкції та отримання зображень безпосередньо з фМРТ активності мозку. З іншого боку, Нова модель штучного інтелекту Stability AI може перетворювати 2D-зображення на 3D-відео.
Функціональна магнітно-резонансна томографія (фМРТ) — це метод нейровізуалізації, який вимірює мозкову активність шляхом виявлення змін кровотоку. Роль цієї технології полягає в картографуванні функції мозку та оцінці потенційних методів лікування неврологічних захворювань.
MindEye базується на наборі даних записів активності мозку учасників, які переглядали серію статичних зображень на МРТ-сканері. Дослідницька група навчила систему аналізувати ці записи та або отримувати вихідне зображення з пулу кандидатів (вилучення), або створювати реконструкцію переглянутого зображення.
Дослідники продемонстрували здатність MindEye перевершити попередні методи в задачах пошуку зображень, досягнувши понад 90% точності в ідентифікації вихідного зображення з групи кандидатів. Для реконструкції MindEye використовує попередньо навчені генеративні моделі
MindEye можна застосовувати в різних сферах. У медичній сфері його здатність реконструювати зорове сприйняття на основі активності мозку може дозволити використовувати методи діагностики та оцінки, особливо у випадках, коли пацієнтам важко спілкуватися. Потенціал MindEye для аналізу в реальному часі полягає в покращенні продуктивності інтерфейсу мозок-комп’ютер.
Команда підкреслює обмеження, пов’язані зі збором даних, включаючи тривалий час сканування та ймовірність перешкод даних через рухи учасників або неуважність.
більше тут.
