语音合成论文优选:使用脑电图来进行语音合成speech synthesis using eeg

声明:语音合成论文优选系列主要分享论文,分享论文不做直接翻译,所写的内容主要是我对论文内容的概括和个人看法。如有转载,请标注来源。

欢迎关注微信公众号:低调奋进

SPEECH SYNTHESIS USING EEG

该文章是德克萨斯大学奥斯汀分校脑机接口实验室2020.05.03发表使用脑电图来进行语音合成的文章,属于前瞻性的研究,具体的文章链接

https://arxiv.org/pdf/2002.12756.pdf

1 研究背景

语音合成把文本转成语音,本文的目的是使用脑电图来进行语音合成。首先是记录语音相对应的脑电图,然后训练脑电图和声学特征之间的映射模型,这样就可以通过脑电图进行语音合成。(多说一句,这种交叉学科的研究太有意义了,最直观的当然是帮助失语的人恢复“说话”,但我的第一想法就是万物交流。可以凭借脑电图这个中间表现形式进行物种之间的交流,这想想都十分有意思,当然这需要交叉学科研究人员加油)

2 系统结构

搞交叉研究领域使用的架构很简单,如图1所示,两层gru模型。其中脑电图的采集装备传感器的位置为图2所示。
 

3 实验结果

本文的实验测试主要客观指标,毕竟不是纯搞语音合成的,可惜没有样音,具体的结果不做介绍。

4 总结

本文的目的是使用脑电图来进行语音合成。首先是记录语音相对应的脑电图,然后训练脑电图和声学特征之间的映射模型,这样就可以通过脑电图进行语音合成。(交叉学科还是挺有意思,真正促进人类的前行)

猜你喜欢

转载自blog.csdn.net/liyongqiang2420/article/details/113106607