顶尖学术期刊《天然》刚刚在线颁布发表的一项工作就在脑机接口畛域向前迈出了一大步。加州大学旧金山分校(UCSF)的神经内科学家Edward Chang教给与其同事启迪出一种解码器,可以将人脑神经信号转化为语音,为副手没法说话的患者实现发声交流完成为了无力的观点验证。
脑机接口(BCI),指的是在人或植物大脑与外部配备之间创设的直延续接,完成脑与设施的静态互换。最近几年来,这一技术手段的快速进行正在为那些神负担负责损或老火流动窒碍的人们改良生存品格。例如,正手瘫痪人士靠“想”控制机器臂取物,或是管束屏幕上的光标打出字词。然则,“意念打字”的速率今朝只能达到每分钟10来个单词,比正常的人类措辞速度要慢得多,还远不克不及满足患者的沟通需求。
因此,一些科学家们试图解码大脑中的言语信号,并经过人工语音合成,把“想”的内容真正“说”进去!
▲本次研究的主要负责人Edward Chang传授是一位神经内科大夫,善于治疗成人癫痫、脑肿瘤等疾病,钻研首要集合于语言、运动和心绪的脑机制(图片源头:UCSF官网)
要挑衅重修语音的坚苦,需求起首实现对表征语音步履的神经勾当进行解码。一些承受开颅手术的癫痫患者为神经科学家提供了贵重的数据。由于须要为一些患者定位癫痫发作的源头,神经内科医生会经过手术在患者颅内植入电极,以便监测其大脑活动。在此根蒂根基上,研究职员采取了一种叫作高密度脑皮层电图(ECoG)的技能,直接记实下受试者大脑皮层的神经活动。
受试者起首按要求高声读出几百条句子,与此同时,研讨职员记录他们大脑的语音发生外围——腹侧感应流动皮层地区的神经活动。
利用循环神经Internet(RNN),研究职员分两步破译了采集到的神经旌旗灯号。第一步,他们将神经旌旗灯号转换为表征发音器官行动的信号,包括下巴、喉、嘴唇与舌头行动干系的脑信号。日后,按照解码进去的发音器官步履,把信号转换为说出的词句。
▲脑机接口实现语音合成的图示(图片来源:参照原料[1])
这类创新的解码方法有助于治理重修语音时的声学失真标题问题,让合成的语音更简单被人听清、听懂,接上去的测试到底考证了这一点。研究职员在亚马逊的众包任务平台Mechanical Turk上招募听众来识别解码器合成的语音,包孕325个单词和101句整句。考验测试中,听众可以获胜地识别出单词,与对人造语音的感知内容差别。对付合成语音收回的整句,听众也能识别出句子的意义。
第一作者Gopala Anumanchipalli博士认为,该到底象征着,这种神经合针言音关于现实世界的使用来讲也曾到达即刻听懂的适用水准。
更成心义的是,研讨人员还测试理解码器关于不作声语言的语音合成技巧。一位被试先按要求说出句子,从此默念对立个句子,也就是只有发音的行动、其实不收回音响——这类气象更合适某些患者的现实环境。终于表示,解码器对默念行动合成的语音频谱与统一句句子的有声频谱是相斥的。
尽管如生物项目学传授Chethan Pandarinath等人在同期《人造》上刊发的批驳中所言,这一琐屑要真正成为一个临床可行的语音脑机接口还面对良多寻衅,但毫无疑难的一点是,脑机接口技艺的继续行进将让有发声窒碍的人重新失去默默说出心声的才能,与方圆天下重新建立宰割。甚至,脑机接口的发展还会让更多的人有笼统打破人类本身的局限,让意识的疆界赓续拓展。





























