重建看到的图像 离 fMRI 再近一步 脑机接口 日本研究员根据大脑 (重建图片)

文章编号:52296 最新资讯 2025-02-01 MRI 脑机接口 神经网络 人工智能

雷锋网 AI 科技评论报道:位于日本的国际电气通信基础技术研究所(ATR)的计算神经科学实验室和京都大学日前联合发布了一篇论文,他们可以借助 fMRI(功能性磁共振成像)技术和基于深度学习的算法根据人的大脑活动重建人类看到的图像。雷锋网 AI 科技评论把论文简介如下

在论文《Deep image reconstruction from human brain activity》(根据人类大脑活动进行深度图像重建)中,作者们介绍道:「这个重建算法可以从一张随机图像出发,迭代地优化其中的像素值,最终让这张图像经过深度神经网络之后产生的特征和大脑活动经过特征解码后得到的多层特征类似。最终得到的优化图像就可以看作是对大脑活动的重建。」

离「脑机接口」再近一步,日本研究员根据大脑 fMRI 重建看到的图像

模型总体结构:用于提取图像特征的DNN网络会提取图像特征,然后与解码出的人类大脑活动特征进行对比,根据两者的误差引导用于重建图像的DGN网络迭代优化图像,最终得到重建结果。

为了收集训练数据,研究员们让被试者观看图像,用fMRI 记录下他们当时的大脑活动。观看的图像样本包括几何图形、自然世界照片和字母;采集数据前后共花了 10 个月时间。

重建出的部分图像请见下方动图。

离「脑机接口」再近一步,日本研究员根据大脑 fMRI 重建看到的图像

离「脑机接口」再近一步,日本研究员根据大脑 fMRI 重建看到的图像

逐步迭代生成重建图像

离「脑机接口」再近一步,日本研究员根据大脑 fMRI 重建看到的图像

英文字母的重建结果

作者们用了许多不同的图像输入做了测试。可以看到每个类别的重建结果都和原图差别不小,但已经体现出了不小的区分度。考虑到fMRI能采集到的信息有限,同时人的视觉皮层的工作机理也还没完全研究明了,这样的结果已经足以令人眼前一亮了。

原论文地址:

论文摘要:用基于机器学习的方法分析人类 fMRI 的图样模式已经让可视化人类意识中的内容变得可能。不过,之前的研究都仅限于低层次的基础图像元素,或者只是成功匹配了典型样例。近期的一些工作已经展现出,人类大脑视觉皮层的活动可以被解码(翻译)为深度神经网络的不同层级的特征,这就给利用层次化视觉特征带来了新的方法。

在这篇论文中,作者们展示了一种全新的图像重建方法:在采集人类大脑活动并将其解码为多层特征之后,可以用优化手段生成新的图像,让新的图像的深度神经网络特征和前面解码出的特征相似。作者们发现,这样优化得到的图像和输入图像(fMRI 成像期间给人类测试者看的刺激图像)很类似,不仅图像本身的外观类似,对图像中内容的主观理解也类似。尽管作者们仅仅使用了日常照片训练模型,他们的方法还是可以成功泛化到人造形状的重建中,这表明他们的方法确实可以根据人脑活动「重建」或者「生成」图像,而不是简单匹配了典型样例。在生成图像过程中,生成模型附加了一些让重建的图像更且像自然图像的限制,这样就以一种高效的方法让重建的图像带有了具有语意意义的细节。根据人类观察的反馈,综合神经网络中多个不同的层的特征形成的图像比只用单个层的图像具有更高的视觉质量。总的来说,这项研究表明人类大脑的层级化视觉信息可以被高效地综合利用,重建出感知性的、主观的图像。

via NVIDIA Developer News ,雷锋网 AI 科技评论编译

DARPA 拨款 6500 万美元用于脑机接口研发,一起来看各顶尖研究机构的脑洞

近距离接触类脑计算,看脑机接口如何走向脑机融合|CCF-ADL 新课报名中

专访脑机接口研究先驱米格尔 • 尼科莱利斯:马斯克的观点我不同意

要做好脑机接口技术,马斯克和扎克伯格还差一本“菜谱”

盘点 | 过去一年拿到融资的脑机接口玩家

版权文章,未经授权禁止转载。详情见 转载须知 。

离「脑机接口」再近一步,日本研究员根据大脑 fMRI 重建看到的图像


本文地址: /article/9aece8d6749db10b2c0d.html
全局中部横幅
全局中部横幅
天津网站 - 天津网站排名 - 网站排行榜

天津网站排名,根据网站的综合值按照不同的天津网站进行筛选排名结果,通过筛选天津网站可以看到每个天津网站里面的网站排名优质的网站是哪些

四大的工资福利,你知道多少?-高顿教育

四大的工资福利,你知道多少?四大到底为何吸引学生?高顿小编为大家讲解关于四大的工资福利,应届生学完高顿网校ACCA课程后进入四大的职业发展历程及四大的工资待遇涨幅。另外,有一张注册会计师证书更容易进四大。目前的北京的四大基本是:1.应届毕业生(在安永叫SA-1普华永道叫SA-2)工资基本在5500-5800(如果毕业就获得某国家的注册会计师证书,可以获得基本工资外的资格补助500-1000元,但不计入。

人才山东

人才山东是山东省最具权威的人才门户网站,为国际国内高层次人才和用人单位提供人才政策、通知公告、人才工程、办事指南、人才资讯、热点新闻等内容。

云南网站导航大全-LOL网址导航网

LOL网址导航网是专业的上网导航网站,精心收录各类优质热门网站信息,同时提供天气、快递、违章等各种生活便民查询工具网址,为您提供安全便捷的上网导航服务,现已被众多网友设为上网主页,网址导航大全首选LOL网址导航.

山东德瑞克分析仪器有限公司_德瑞克仪器_实验室一站式服务_实验室仪器厂家-专注实验室仪器研发、生产、销售,实验室整体建设方案

是一家以实验室一站式服务为核心,集研发、制造、销售于一体的检测仪器制造企业,致力于为国内外各行业提供一流的实验室解决方案及配套设备。,厂家热线:18678650712.产品涵盖:分析检测仪器/环境检测仪器/包装检测仪器/橡塑检测仪器/医疗检测仪器/教学仪器/实验家具/实验耗材/计量校准/维修培训等十大类。

防爆叉车_防爆agv叉车_防爆仓储设备租赁厂家-瑞朗特苏州分公司

深圳瑞朗特防爆车辆有限公司专注于防爆电动叉车、防爆搬运车等的研发生产,用十年铸就了卓越的防爆技术,正在为中国防爆事业发展锦上添花咨询热线:15118065305

淘宝电商培训学校_跨境电商培训机构_广州汇学电商培训机构

广州汇学电商教育是专业的电商培训机构,学校多年从事电商淘宝培训、跨境电商培训、新媒体培训、流量营销培训、抖音短视频培训等课程,二十年电商培训经验,已成为专业的电商培训学校。

【证知教育】会计考证,计算机培训

证知教育是一家拥有10多年教育开发团队的培训机构,开设了学历提升,自考大专本科,会计,教师资格证,人力资源管理,网页设计和室内设计等课程,数万学子从中获益.证知教育,您的证知教育!

重庆中专|职高|技校招生-重庆中专招生网

重庆中专招生网为中职中专生提供重庆中专学校、重庆技工学校、重庆职业中专学校、重庆中专卫校、重庆中专升大专、重庆中专升本科、重庆中职升本科,涵盖|三加二五年制大专、中高职一体化、职教高考等招生专业、报名条件、报名时间、录取分数线等中专招生报名考试资讯。

贵州房地产开发资质_贵阳房地产开发资质代办_贵州房开资质代办-贵州立信科企业管理有限公司

贵州立信科企业管理有限公司(www.gzhhqy.cn),靠谱的房开资质代办.贵州拥有正规经营资质代办资格的资质代办公司.专注贵州房地产开发资质,贵阳房地产开发资质代办,贵州房开资质代办,房开资质代办,贵州资质代理,企业资质代办等.办资质,找贵阳房开资质代办!

自学资源网-学习网络VIP赚钱项目

自学资源是以免费分享网络赚钱项目,学习网络VIP教程,交流网络赚钱经验,揭秘手机赚钱、游戏赚钱项目的平台,帮助网络创业者了解掌握网络赚钱知识轻松创业!

起名网-宝宝名字-女人名字-男生名字-名字大全 - 起名网

本站起名网(www.cadjc.cn),主要为大家整理各类名字,宝宝名字,女宝宝名字,男宝宝名字等内容!

全局底部横幅