MindEye,一种最新的fMRI(功能磁共振成像,Functional Magnetic Resonance Imaging)生成图像的方法

工具软件1年前 (2023)发布 AI观察员
129 0 0

MindEye,一种最新的fMRI(功能磁共振成像,Functional Magnetic Resonance Imaging)生成图像的方法。MindEye能将fMRI信号影射到CLIP (Contrastive Language–Image Pre-training) openai.com/research/clip 图像的Embedding,再借助这个Embedding到预训练的Diffusion模型,例如Versatile Diffusion、Stable Diffusion,从中生成图片。从生成结果看,部分生成图片的结果和被测试者当时浏览的照片高度相似。

Github地址https://github.com/MedARC-AI/fMRI-reconstruction-NSD

论文地址:https://arxiv.org/abs/2305.18274

项目地址:https://medarc-ai.github.io/mindeye/

© 版权声明

相关文章

天猫U特购  京东优惠购        京东优惠    天猫优惠