语言解码器重建“想象中的语言”
研究示意图。解码建想图片来源:《自然·神经科学》 科技日报记者 张梦然 英国《自然·神经科学》发表的器重一篇论文,描述了一种非侵入性的象中语言解码器,可通过功能性磁共振(fMRI)数据,解码建想重建感知到或想象出的器重语言。 过去的象中语音解码器被用于侵入性神经外科手术后记录神经活动,这限制了它们的解码建想用途。其他使用非侵入性脑活动记录的器重解码器限制在解码单个词汇或短语,还不清楚此类解码器是象中否可用于连续的自然语言。 美国得克萨斯大学奥斯汀分校研究人员开发了一个解码器,解码建想可通过来自fMRI数据获得的器重脑模式重建连续语言。他们记录了3名参与者倾听16小时叙事故事的象中fMRI数据,以训练模型在脑活动和语义特征之间进行映射,解码建想捕捉特定词组含义和相关的器重大脑响应。这一解码器模型随后测试了参与者听新故事的象中脑响应,这些故事没有用在初始训练数据集中。使用这一脑活动,解码器可生成词汇序列,捕捉到新故事的含义,还生成了一些精确的故事词汇和短语。他们发现,解码器可从大多数已知处理语言的脑区和网络的活动中推断连续语言。 这一解码器还可通过fMRI数据预测某个参与者想象的故事的含义,或观看一部无声电影的内容。当一名参与者主动听一个故事,忽略其他同时播放的故事,解码器可识别出那个被主动听的故事的含义。 团队对解码器作了隐私分析,发现当它基于一名参与者的fMRI数据进行训练时,对预测另一名参与者数据的语义内容预测表现不佳。他们总结说,参与者的合作在训练和应用这些非侵入性解码器中非常关键,而未来此类技术的发展,亦需要政策保护心理隐私。
- 最近发表
- 随机阅读
-
- 江西省水网建设重点工程乐平水利枢纽开工
- 一场与时间赛跑的生命救援——甘肃夏河泥石流灾害搜救纪实
- 中山大学MPA获得全球公共管理院校联盟最高等级认证
- 北京:什刹海街道党群服务中心为新就业群体送清凉
- 化草为龙,舞起!
- 总编辑圈点
- 基因编辑木材使造纸更可持续
- 温州鹿城:传统鞋业焕发智造魅力
- 锦绣中国年丨民俗非遗之西安鼓乐
- 西去列车的窗口(贺敬之)
- AIGC能力平台带动国漫发展
- 这一报告发布 为气候投融资发展提供新指引
- 新春走基层丨柳州:科创科普春节“不打烊”
- 我国西南地区首座超深四线地铁站主体完工
- 中山大学MPA获得全球公共管理院校联盟最高等级认证
- 高质量发展调研行丨你见过在鸡蛋上刻字吗?
- 成都:洛带古镇单日游客量破15万人次
- 四问台风“泰利”如何“隔山打牛”,把暴雨远程下到江淮?
- 更快、更轻、更智能——新一代“空中造楼机”4天盖好一层楼
- 韦布望远镜发现三颗候选暗星,动力不来自核聚变,而是由暗物质提供
- 搜索
-