科学家研发出 读心术 3% 错误率低至 直接将脑电波翻译成文本 (科学家研发出穿戴人工喉)

文章编号:40509 资讯动态 2024-12-03 脑机接口 脑电波

美国加州大学旧金山分校的科学家,已经训练出一种算法,可以直接将受试者的脑电波实时翻译成句子,错误率仅为 3% 。

这项研究发表在《自然神经科学》(Nature Neuroscience)杂志上,他们招募了 4 位志愿者,这些志愿者被要求多次朗读 30-50 个固定句子,而电极记录下他们的大脑活动。[1]

研发出“读心术”,直接将脑电波翻译成文本,错误率低至 3%

所有者:Gerd Altmann 】

这些数据随后被输入到机器学习算法,它将每个句子的大脑活动数据转换成一串数字和字符串。

系统从这些大脑活动数据再推导出声音,并和实际记录的音频进行比较。数字和字符串则被再次输入到系统,转换成一个单词序列。

起初,系统会吐出毫无意义的句子。但是当系统将每个单词序列与实际朗读的句子进行比较时,它得到了改进,学会了数字字符串与单词的关系,以及哪些单词是有上下文关系的。

算法不断的训练,直到从说话时的大脑活动中产生书面文本,类似机器翻译。

新系统的准确性远远高于以前的方法。虽然准确性因人而异,但对于其中一位志愿者来说,平均每个句子只有 3% 需要纠正,高于速记员 5% 的单词错误率。

当然,目前这个系统还是有很大局限,算法还只能处理少量的句子。系统也不能用于严重残疾失去语言能力的患者,因为它依赖于记录大声说出句子的人的大脑活动。

然而,每个志愿者只用了不到 40 分钟来训练,在有限的小数据集情况下,达到了迄今为止最大的精确度。

脑机接口

人类大脑信号到外部设备之间建立连接通路并不是新鲜事,脑机接口的研究已持续了 30 年。

研发出“读心术”,直接将脑电波翻译成文本,错误率低至 3%

所有者:aytuguluturk 】

在过去的十年,我们已经能够解码语音信号,但是局限于孤立音素或者单音节词,在一段 100 个单词的连续语音的情况下,解码正确的单词少于 40% 。

科学家们此次找到的是一个更直接的方法,就是采取机器翻译类似的算法。机器翻译就是将文本从一种语言到另一种语言的算法翻译,只不过这次输入的文本变成了脑电波信号。此次发表的论文《使用编码器-解码器框架:大脑皮层活动到文本的机器翻译》,正是详细描述了这一过程。

在系统对一个志愿者进行训练之后,再对另外一个志愿者训练时,解码结果得到了改善,这表明该技术可以在人和人之间进行迁移。

在 GitHub 上,放置了论文对应的代码。

ecog2txt 模块,用于从神经数据中将语音解码为文本。它用 Python 代码实现了跨主题的迁移学习的高级功能。[2]

研发出“读心术”,直接将脑电波翻译成文本,错误率低至 3%

【雷锋网注:ecog2txt是论文对应的开源实现模块】

而训练本身则是通过另一个 machine_learning 软件包,它在 TensorFlow 里实现了一个序列到序列的网络。[3]

这些软件包的作者,也是论文的联合作者之一约瑟夫·马金(Joseph Makin)博士,他目前是加州大学旧金山分校整合神经科学中心的研究科学家。他的专业是电机工程和计算机科学,专门研究控制理论,包括脑机接口的算法开发。[4]

研发出“读心术”,直接将脑电波翻译成文本,错误率低至 3%

【雷锋网注:上图为张爱德博士】

论文的另外一个联合作者是张爱德(Edward Chang)博士,他是医学博士和神经外科医生,擅长为患有癫痫病,脑瘤,三叉神经痛,面肌痉挛和运动障碍的成年人提供治疗。他目前是加州大学旧金山分校威尔神经科学研究所的神经外科教授,还领导了一个神经工程与假肢中心,以恢复瘫痪和言语障碍等神经疾病患者的功能。[5]

网友评论

科学家们曾经认为将大脑信号转换为可理解的语音可能需要数十年,而现在这个间隔可以用几年来衡量。在 reddit 的科学板块,该消息引发了 3 万多次点赞和上千条评论。[6]

网友 derlumpenhund 评论说,这并不表示思想阅读机发明出来了。它主要依赖于解码口舌运动时对应的大脑皮层活动,需要收集给定主题的数据,并且提前进行训练,并不会直接解码你的思想活动。话虽这么说,这一进展也很了不起。

网友 boointhehouse 则说,如果这项技术早点用于斯蒂芬·霍金,在他的一生中还能完成更多的工作。

[1]

[2]

[3]

[4]

[5]

[6]

原创文章,未经授权禁止转载。详情见 转载须知 。

研发出“读心术”,直接将脑电波翻译成文本,错误率低至 3%


本文地址: https://www.gpxz.com/article/8515ef88f314d2e61f58.html
全局中部横幅
全局中部横幅
春秋旅游网

春秋旅游网—春秋旅游官方网,提供国内游、出境游、周边游、跟团游、自由行、邮轮游、景点门票、春航特价机票、旅游签证预定,四十年品质保障.

登录

leangoo是一个以看板为中心,简洁、轻量、高可视化的敏捷项目协作工具。通过看板泳道、燃尽图等功能实现高效敏捷团队协作,是互联网、敏捷研发利器。

武汉除甲醛

室内环境净化治理国家甲级资质公司湖北格瑞乐环保,提供除甲醛、甲醛检测、空间消毒、杀菌除螨、水质污染检测与治理、室内空气检测和治理以及室内香氛净化、空气污染净化等各类环保服务,全国环保咨询热线:400-027-8156

智慧安全生产管理平台

安全生产,安全生产管理,企业安全生产管理,安全生产监督,智慧安监,安全生产监控,安全生产管理软件,安全生产管理平台,隐患排查,风险辨识,风险辨识管控

江苏景泰电力科技有限公司

江苏景泰电力科技有限公司是一家专业从事各类输送设备、除尘器的设计、开发和生产的高科技公司,欢迎来电咨询:13338881588

郴州恒嘉石墨碳素有限责任公司

郴州恒嘉石墨碳素有限责任公司位于郴州市苏仙区马头岭乡,该厂因城市建设发展需要,于2011年从郴州市区搬迁至此,是一家具有20余年生产各类电池碳棒及石墨制品加工的企业。0735-8889851

卤汀河畔大米

江苏金麦穗生态农业科技有限公司主体经营是以水稻、小麦、油菜籽等农产品收购、深加工、销售以及农业技术研发和农业技术咨询服务等。

pcb油墨

川裕工業對PCB油墨、LED封裝材料及電阻、電感、電容(RCC)塗料之研究開發已有數十餘年之經歷。雖有衆多廠牌林立競争,我們仍抱着公司一貫之宗旨,提供“物超所值”的産品,爲臺灣電子業界服務。

贵州桐宸酒业有限公司官网

贵州桐宸酒业有限公司_酱香白酒_桐酱酒秉承酱香酒传统技艺,助力酱香白酒“桐梓特色产区”建设贵州桐宸酒业有限公司,成立于2022年01月04日,注册资本3亿元,为桐梓县财政局全资持股国有企业。公司继承桐梓悠久酿酒历史,秉承酱香酒传统技艺,助力酱香白酒“桐梓特色产区”建设,围绕白酒的生产与销售全产业链,发展粮食仓储、包装印务、现代物流等白酒配套产业。目前下辖1家全资子公司,为桐梓县桐宸酒业销售有限公司。

伊马莱富(上海)制药机械有限公司

伊马莱富(上海)制药机械有限公司是一家年轻而富有活力的公司,坐落于上海青浦工业园区。专业从事液体、粉末药品的无菌灌装联动线的研发、生产、销售和服务;包括洗瓶机、灭菌烘箱、液体和粉体灌装机、轧盖机。伊马莱富(上海)制药机械有限公司致力于服务国内外市场并取得了显著的成就,在2012年底成为了意大利伊马(IMA)集团成员。

联系我们华纳有限公司客服联系电话97978103微(开户)

华纳公司联系客服【电话16606917693】客服【微信97978103】【QQ:2702767232】【办理业务请添加以上联系方式】【公司直属客服】【24小时在线服务】

长沙弯管加工厂

长沙弯管加工厂长沙固鑫机械专注不锈钢弯管,方管弯管,圆管弯管。工厂有上百套弯管模具,可以为客户提供更佳的加工效果。工厂配套有车床、铣床、磨床、保护焊、氩弧焊、氧割、线切割等加工设备,可以快速完成弯管模具制作,为客户提供一站式加工服务。

全局底部横幅