语言解码器重建“想象中的语言”

2023-05-06 11:12:04 科技日报

（记者张梦然）英国《自然·神经科学》发表的一篇论文，描述了一种非侵入性的语言解码器，可通过功能性磁共振（fMRI）数据，重建感知到或想象出的语言。

过去的语音解码器被用于侵入性神经外科手术后记录神经活动，这限制了它们的用途。其他使用非侵入性脑活动记录的解码器限制在解码单个词汇或短语，还不清楚此类解码器是否可用于连续的自然语言。

美国得克萨斯大学奥斯汀分校研究人员开发了一个解码器，可通过来自fMRI数据获得的脑模式重建连续语言。他们记录了3名参与者倾听16小时叙事故事的fMRI数据，以训练模型在脑活动和语义特征之间进行映射，捕捉特定词组含义和相关的大脑响应。这一解码器模型随后测试了参与者听新故事的脑响应，这些故事没有用在初始训练数据集中。使用这一脑活动，解码器可生成词汇序列，捕捉到新故事的含义，还生成了一些精确的故事词汇和短语。他们发现，解码器可从大多数已知处理语言的脑区和网络的活动中推断连续语言。

这一解码器还可通过fMRI数据预测某个参与者想象的故事的含义，或观看一部无声电影的内容。当一名参与者主动听一个故事，忽略其他同时播放的故事，解码器可识别出那个被主动听的故事的含义。

团队对解码器作了隐私分析，发现当它基于一名参与者的fMRI数据进行训练时，对预测另一名参与者数据的语义内容预测表现不佳。他们总结说，参与者的合作在训练和应用这些非侵入性解码器中非常关键，而未来此类技术的发展，亦需要政策保护心理隐私。

（责编：赵珊）

人民周刊网版权及免责声明：

1.凡本网注明“来源：人民周刊网”或“来源：人民周刊”的所有作品，版权均属于人民周刊网（本网另有声明的除外）；未经本网授权，任何单位及个人不得转载、摘编或以其它方式使用上述作品；已经与本网签署相关授权使用协议的单位及个人，应注意作品中是否有相应的授权使用限制声明，不得违反限制声明，且在授权范围内使用时应注明“来源：人民周刊网”或“来源：人民周刊”。违反前述声明者，本网将追究其相关法律责任。

2.本网所有的图片作品中，即使注明“来源：人民周刊网”及/或标有“人民周刊网(www.peopleweekly.cn)”“人民周刊”水印，但并不代表本网对该等图片作品享有许可他人使用的权利；已经与本网签署相关授权使用协议的单位及个人，仅有权在授权范围内使用图片中明确注明“人民周刊网记者XXX摄”或“人民周刊记者XXX摄”的图片作品，否则，一切不利后果自行承担。

3.凡本网注明“来源：XXX（非人民周刊网或人民周刊）”的作品，均转载自其它媒体，转载目的在于传递更多信息，并不代表本网赞同其观点和对其真实性负责。

4.如因作品内容、版权和其它问题需要同本网联系的，请在30日内进行。

※ 联系电话：010-65363526 邮箱：rmzk001@163.com

语言解码器重建“想象中的语言”

人民周刊微信公众号

人民周刊微博

热点话题

热门视频