StabilityAI正在研究仅通过思考即可生成图像的技术;无需提示:MindEye

阅读时间图标 2分钟读


读者帮助支持 MSpoweruser。如果您通过我们的链接购买,我们可能会获得佣金。 工具提示图标

阅读我们的披露页面,了解如何帮助 MSPoweruser 维持编辑团队 查看更多

重点说明

  • MindEye 是一种新系统,可以直接从大脑扫描中重建和检索图像。
  • MindEye 在检索原始图像和生成重建方面都实现了高精度。

就在一年前,通过提示生成图像还是世界上最重要的事情。每个人都在谈论它,现在看来它很快就会成为过去式。 StabilityAI 的 MindEye 是一种直接从功能磁共振成像大脑活动中重建和检索图像的新方法。另一方面, Stability AI的新AI模型可以将2D图像变成3D视频。

功能性磁共振成像 (fMRI) 是一种通过检测血流变化来测量大脑活动的神经成像技术。该技术的作用是绘制大脑功能图并评估神经系统疾病的潜在治疗方法。

MindEye 建立在参与者在 MRI 扫描仪中查看一系列静态图像的大脑活动记录数据集的基础上。研究团队训练系统来分析这些记录,并从候选池中检索原始图像(检索)或生成所查看图像的重建。

研究人员展示了 MindEye 在图像检索任务中超越以前方法的能力,从候选图像库中识别原始图像的准确率达到 90% 以上。对于重建,MindEye 使用预先训练的生成模型

MindEye 可以应用于各个领域。在医学领域,它从大脑活动重建视觉感知的能力可能会提供诊断和评估方法,特别是在患者沟通困难的情况下。 MindEye 的实时分析潜力旨在改善脑机接口性能。

该团队强调了与数据收集相关的局限性,包括所需的较长扫描时间以及由于参与者移动或注意力不集中而可能产生噪音数据。

更多 点击此处。

发表评论

您的电邮地址不会被公开。 必填带 *