无需提示词,Stability AI演示MindEye:目标想什么就能生成什么
创始人
2024-03-21 14:28:43
0

原标题:无需提示词,Stability AI演示MindEye:目标想什么就能生成什么

3 月 21 日消息,AI 浪潮席卷而来,此前不少人认为“提示词工程师”会成为新兴工种,而 MindEye 的问世表明,这个岗位或许没有存在的价值了。

此前不少人认为,未来 AI 时代并不在于某个模型是否强大,而是在于人类是否能够更高效利用这些 AI 模型,完成特定任务。

这也诞生了“提示词工程师”概念,该工程师能够比普通人更能理解 AI,能够提出更准确的提示词,从而让 AI 满足其要求输出。

而 StabilityAI 于 2023 年 7 月推出 MindEye1,近日再次推出了 MindEye2,让“提示词工程师”的价值大幅降低,该模型并不依赖于特定的提示词,而是直接基于用户脑电波生成,也就是说用户大脑想要什么,未来该模型就能生成什么。

MindEye 直接从 fMRI 大脑活动中重建和检索图像,而且可以将二维图像转化为三维视频。

功能磁共振成像(fMRI)是一种通过检测血流变化来测量大脑活动的神经成像技术。这项技术的作用是绘制大脑功能图,评估治疗神经系统疾病的潜在方法。

MindEye 基于参与者在核磁共振成像扫描仪上观看一系列静态图像时的大脑活动记录数据集。研究团队训练该系统分析这些记录,并从候选库中检索原始图像(检索)或生成所查看图像的重建图像。

研究人员证明,MindEye 在图像检索任务中的表现优于以往的方法,从候选图像中识别原始图像的准确率超过 90%。在重建方面,MindEye 使用预先训练好的生成模型。

MindEye 可应用于各个领域。在医疗领域,它从大脑活动中重建视觉感知的能力可用于诊断和评估方法,尤其是在病人难以沟通的情况下。MindEye 的实时分析潜力有望改善脑机接口的性能。

研究小组强调了与数据收集有关的局限性,包括所需的冗长扫描时间,以及由于参与者移动或注意力不集中而可能产生的数据噪声。

IT之家附上论文参考

Reconstructing the Mind’s Eye: fMRI-to-Image with Contrastive Learning and Diffusion Priors

MindEye2: Shared-Subject Models Enable fMRI-To-Image With 1 Hour of Data

MindEye2: Shared-Subject Models Enable fMRI-To-Image With 1 Hour of Data

【来源:IT之家】

相关内容

热门资讯

龙腾光电取得显示面板和显示装置... 国家知识产权局信息显示,昆山龙腾光电股份有限公司取得一项名为“显示面板和显示装置”的专利,授权公告号...
中国第四代自主超导量子计算机“... 中新社合肥5月9日电 (记者 张俊)记者9日从安徽省量子计算芯片重点实验室获悉,中国第四代自主超导量...
江苏元广半导体取得耐酸碱门锁装... 国家知识产权局信息显示,江苏元广半导体设备有限公司取得一项名为“一种耐酸碱门锁装置”的专利,授权公告...
亚芯半导体申请钼钛合金材料制备... 国家知识产权局信息显示,亚芯半导体材料(江苏)有限公司申请一项名为“一种钼钛合金材料的制备方法及应用...
芯德半导体二次递表港交所 新京报贝壳财经讯 5月8日,据港交所披露,江苏芯德半导体科技股份有限公司(简称“芯德半导体”)向港交...
高通年底或推出四档旗舰芯片 含... 【CNMO科技消息】5月9日,“数码闲聊站”爆料称,高通在年底的移动平台迭代中,或将形成更清晰的旗舰...
编造、传播芯片订单虚假信息 两... 每经AI快讯,5月9日,北京证监局网站披露了一则行政处罚决定,冯朋朋、班可可两人因通过微信公众号文章...
国家基金双轮驱动,网络芯片成A... 图片为AI生成 据天眼查工商信息显示,近日上海云脉芯联科技有限公司发生工商变更,新增国家人工智能产业...
普发电气取得柜内安装板可调节开... 国家知识产权局信息显示,安徽普发电气有限公司取得一项名为“一种柜内安装板可调节的开关柜”的专利,授权...
正浩创新申请并离网控制方法及电... 国家知识产权局信息显示,深圳市正浩创新科技股份有限公司申请一项名为“并离网控制方法及电力设备”的专利...