科学家研发出 读心术 3% 错误率低至 直接将脑电波翻译成文本 (科学家研发出穿戴人工喉)

文章编号:40509 最新资讯 2024-12-03 脑机接口 脑电波

美国加州大学旧金山分校的科学家,已经训练出一种算法,可以直接将受试者的脑电波实时翻译成句子,错误率仅为 3% 。

这项研究发表在《自然神经科学》(Nature Neuroscience)杂志上,他们招募了 4 位志愿者,这些志愿者被要求多次朗读 30-50 个固定句子,而电极记录下他们的大脑活动。[1]

科学家研发出“读心术”,直接将脑电波翻译成,错误率低至 3%

所有者:Gerd Altmann 】

这些数据随后被输入到机器学习算法,它将每个句子的大脑活动数据转换成一串数字和字符串。

系统从这些大脑活动数据再推导出声音,并和实际记录的音频进行比较。数字和字符串则被再次输入到系统,转换成一个单词序列。

起初,系统会吐出毫无意义的句子。但是当系统将每个单词序列与实际朗读的句子进行比较时,它得到了改进,学会了数字字符串与单词的关系,以及哪些单词是有上下文关系的。

算法不断的训练,直到从说话时的大脑活动中产生书面文本,类似机器翻译。

新系统的准确性远远高于以前的方法。虽然准确性因人而异,但对于其中一位志愿者来说,平均每个句子只有 3% 需要纠正,高于速记员 5% 的单词错误率。

当然,目前这个系统还是有很大局限,算法还只能处理少量的句子。系统也不能用于严重残疾失去语言能力的患者,因为它依赖于记录大声说出句子的人的大脑活动。

然而,每个志愿者只用了不到 40 分钟来训练,在有限的小数据集情况下,达到了迄今为止最大的精确度。

脑机接口

从人类大脑信号到外部设备之间建立连接通路并不是新鲜事,脑机接口的研究已持续了 30 年。

科学家研发出“读心术”,直接将脑电波翻译成,错误率低至 3%

所有者:aytuguluturk 】

在过去的十年,我们已经能够解码语音信号,但是局限于孤立音素或者单音节词,在一段 100 个单词的连续语音的情况下,解码正确的单词少于 40% 。

科学家们此次找到的是一个更直接的方法,就是采取机器翻译类似的算法。机器翻译就是将文本从一种语言到另一种语言的算法翻译,只不过这次输入的文本变成了脑电波信号。此次发表的论文《使用编码器-解码器框架:大脑皮层活动到文本的机器翻译》,正是详细描述了这一过程。

在系统对一个志愿者进行训练之后,再对另外一个志愿者训练时,解码结果得到了改善,这表明该技术可以在人和人之间进行迁移。

在 GitHub 上,放置了论文对应的代码。

ecog2txt 模块,用于从神经数据中将语音解码为文本。它用 Python 代码实现了跨主题的迁移学习的高级功能。[2]

科学家研发出“读心术”,直接将脑电波翻译成,错误率低至 3%

【雷锋网注:ecog2txt是论文对应的开源实现模块】

而训练本身则是通过另一个 machine_learning 软件包,它在 TensorFlow 里实现了一个序列到序列的网络。[3]

这些软件包的作者,也是论文的联合作者之一约瑟夫·马金(Joseph Makin)博士,他目前是加州大学旧金山分校整合神经科学中心的研究科学家。他的专业是电机工程和计算机科学,专门研究控制理论,包括脑机接口的算法开发。[4]

科学家研发出“读心术”,直接将脑电波翻译成,错误率低至 3%

【雷锋网注:上图为张爱德博士】

论文的另外一个联合作者是张爱德(Edward Chang)博士,他是医学博士和神经外科医生,擅长为患有癫痫病,脑瘤,三叉神经痛,面肌痉挛和运动障碍的成年人提供治疗。他目前是加州大学旧金山分校威尔神经科学研究所的神经外科教授,还领导了一个神经工程与假肢中心,以恢复瘫痪和言语障碍等神经疾病患者的功能。[5]

网友评论

科学家们曾经认为将大脑信号转换为可理解的语音可能需要数十年,而现在这个间隔可以用几年来衡量。在 reddit 的科学板块,该消息引发了 3 万多次点赞和上千条评论。[6]

网友 derlumpenhund 评论说,这并不表示思想阅读机发明出来了。它主要依赖于解码口舌运动时对应的大脑皮层活动,需要收集给定主题的数据,并且提前进行训练,并不会直接解码你的思想活动。话虽这么说,这一进展也很了不起。

网友 boointhehouse 则说,如果这项技术早点用于斯蒂芬·霍金,在他的一生中还能完成更多的工作。

[1]

[2]

[3]

[4]

[5]

[6]

原创文章,未经授权禁止转载。详情见 转载须知 。

科学家研发出“读心术”,直接将脑电波翻译成,错误率低至 3%


本文地址: /article/8515ef88f314d2e61f58.html
全局中部横幅
全局中部横幅
泰康保险集团官网-泰康保险集团股份有限公司-保险,资管,医养

泰康成立于1996年,旗下拥有泰康人寿、泰康资产、泰康养老、泰康之家、泰康健康管理、泰康在线等公司,形成保险、资管、医养三大核心业务体系,全力打造“活力养老、高端医疗、卓越理财、终极关怀”四位一体商业模式,全面推进大健康、大民生、大幸福工程建设,通过遍布全国的线下实体网络和线上互联网平台,为客户提供“从摇篮到天堂”持续一生的全方位创新服务。

不锈钢手拉葫芦|电动葫芦|手扳葫芦|起重工具|爬架电动葫芦|超市起重|吊装工具|防爆手拉葫芦—晋昌盛起重索具集团

晋昌盛起重索具集团公司主要生产批发零售起重工具手拉葫芦,电动葫芦,卷扬机,手扳葫芦,环链葫芦,环链电动葫芦,千斤顶,爪式千斤顶,手摇挎顶,气动葫芦,气动环链葫芦,弹簧平衡器,永磁起重器,起重链条,吊钩;卸扣,捆绑器,紧线器,卡头,钢丝绳,手摇挎顶,钢板吊具,永磁起重器,吊装带,搬运小坦克,附爪式千斤顶及索具配件。

硬件_网址导航_实用网址大全_最实用的上网主页

网址导航――RC0991.COM是最实用的上网导航网站,是方便网民上网的入口平台,及时收录包括网络电视、电景、音乐、视频、小说、游戏等热门分类的优秀网站,与搜索完美结合,提供最简单便捷的网上导航服务,是数千万网民的上网主页。

安徽氪金法律咨询-法律咨询/债务优化/经济纠纷/律师事务所/经济纠纷/委托代理/企业信贷/担保风险代理

律动在线主要从事个人及企业的债务优化,诉讼与非诉讼法律事务,私人借贷纠纷,企业信贷、抵押贷等债务重组业务;

安全步道、马道、冲孔板、立柱栏杆—易攀德品牌(海跃-步道厂家)

海跃致力于易攀德安全步道(延展铝格板)的研发和生产,是步道厂家,主要有EWG13,EWG22,EWG30,EWG30SL,EWG30/ST,EWG40,EWG40/ST等型号,同时还有立柱栏杆,冲孔板,冲孔步道等配套产品,详细产品信息请致电海跃客服,竭诚为您服务!

广州商标注册-商标注册流程及费用-正穗知识产权代理公司

正穗知识产权代理公司为中小企业提供广州商标注册、商标申请、注册流程及费用咨询、商标注册查询等服务,致力于为小微企业提供安全、优质、高效的工商财税一站式服务。

深圳市保安服务有限公司_深圳保安服务

1985年1月9日,在深圳特区特殊体制条件下,一批安战线上的拓荒者在无先例、无经验的情况下创建了全国内地市级保安服务公司一一深圳市保安服务有限公司。2017年6月30日,公司脱钩改制,由深圳市公安局划转为深圳市投资控股有限公司,并高度授权市公安局委托管理,成为全市唯一一家隶属于市公安局和市投控双重领导的国有保安公司。

东大家教中心--东北大学唯一指定家教网【官方网站】

东北大学家教服务中心|24小时联系电话:|东北大学家教网|东大家教网|东大家教|东北大学生家教|沈阳家教|沈阳家教网

四川省内江县威远创宏城市开发服务有限公司

威远创宏城市开发服务有限公司成立于2016年6月,注册资金6000万元人民币,是四川振威实业发展集团有限公司的一家全资子公司。

山东智工场物联科技有限公司

山东智工场物联科技有限公司成立于2017年9月,由几名海外归国人员创建,团队拥有10余年电机节能控制经验,并将多项国内外先进技术应用于生产现场。智工场人致力于通过物联网、大数据、机器学习等技术实现每台电机的智能管理,让每一台电机可视、高效、健康。

卫生杀虫剂,卫生杀虫剂厂家,卫生防蛀剂品牌,气雾杀虫剂厂,气体杀虫剂,中山市金鸟化工有限公司

中山市金鸟化工有限公司一直致力于提供各种优质的卫生杀虫剂,卫生防蛀剂,杀虫气雾剂,在卫生杀虫剂研究领域始终走在世界前列,致力于创建健康、清洁的卫生环境。产品质量保证,欢迎咨询。

全局底部横幅