让失声群体重获“新声”,脑机接口领域现重大突破

日前,学术期刊《自然》在线发表了一篇文章,其中涉及一种解码器,能够将大脑神经信号转化为语音,帮助无法说话的患者实现发声交流。

据了解,该解码器由加州大学旧金山分校的神经外科学家Edward Chang教授与其同事一同开发。他们采用了一种叫做“高密度脑皮层电图”的技术,能够基于癫痫患者脑中被植入的电极(医疗监测需要)所传出的数据,直接记录下受试者大脑皮层的神经活动。

过程中,受试者会被要求大声读出几百条句子,研究人员则会同步记录他们大脑腹侧感觉运动皮层区的神经活动,这里是大脑的语音产生中心。

随后,研究人员将利用循环神经网络破译采集到的神经信号,其中涉及两个步骤:第一步,他们将神经信号转换为表征发音器动作的信号,包括下巴、喉、嘴唇和舌头动作相关的脑信号;第二步,他们则根据解码出来的发音器官动作,把信号转换为说出的语句。

为了验证自己的成果,研究人员已经在亚马逊的众包任务平台Mechanical Turk上招募了听众,来辨认解码器合成的语音,测试内容包括325个单词和101局整句。结果显示,听众能够成功的识别出单词,和对自然语音的感知模式一样。

对于这一测试结果,第一作者Gopala Anumanchipalli博士表示,该结果意味着这种神经合成语音对于现实世界的应用来说已经达到即刻听懂的实用程度。

此外,研究人员还进行了另一项测试,让受试者用默读的方式读出同一个句子。结果显示,无声言语的合成效果不如有声言语。但Edward Chang表示,虽然语音解码的准确性大大降低,但受试者在没有声音的情况下模仿发声仍然可以进行语音合成。至于那些已经丧失语音相关动作能力的群体,该系统的是适用性还需要进一步研究。

针对这一项研究成果,生物工程学教授Chethan Pandarinath等人在文章评论中表示,这一系统要成为一个临床可行的语音合成脑机接口,还存在许多挑战。但可以肯定的是,脑机接口技术的持续进步可以让存在发声障碍问题的群体重新获得“说话”的能力。

(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )

赞助商
2019-04-25
让失声群体重获“新声”,脑机接口领域现重大突破
日前,学术期刊《自然》在线发表了一篇文章,其中涉及一种解码器,能够将大脑神经信号转化为语音,帮助无法说话的患者实现发声交流。

长按扫码 阅读全文