标签:可微分语音合成器

AI助力脑机接口研究,纽约大学突破性神经语音解码技术,登Nature子刊

神经失语症严重影响生活,但深度学习和脑机接口(BCI)技术的进步为开发神经语音假肢提供了可能性。纽约大学的研究人员开发了一种新型可微分语音合成器,使用轻量级卷积神经网络将语音编码为可解释的参数,如音高、响度和共振峰频率。此系统可以将神经信号映射到这些参数,重构出自然的语音,尤其适用于小数据量情况。研究发表在《Nature Machine Intelligence》上,展示了高准确性和因果操作的能力,可用于左、右脑半球的语音解码。