面向聋儿言语康复的发音检测技术的研究与应用

• 作 者: 郝健英
• 发表日期: 2011年期
• 关键词: 言语康复系统 言语训练 3D虚拟头像 发音可视化 发音检测 语音信号处理 语音识别

本文基于交互式、可视化、多媒体的言语康复训练方法,运用语音信号处理、语音识别、图像识别、计算机图形学等技术设计并实现了一种交互式聋儿言语康复训练系统,该系统将语音可视化,内容可视化,发音检测方法应用在发音教学中,给予聋儿一种全新的语言学习模式。三维虚拟头像使得学习者可以清楚的看到内部发音器官的协同运动,形象的学习规范的发音动作；结合手语、图形、文字等方式的发音对发音内容进行可视化,可以有效地帮助聋儿理解所学发音的具体内容；自动检测发音的时长、响度和基频等特征的清晰度和准确度,并进行可视化显示,使学习者学会控制口舌肌肉。在系统框架下,本文重点研究了汉语语音的发音检测技术,从方法实时性、稳定性及应用背景的角度出发,通过对比分析,选取了有效的发音有无检测和响度计算方法,分别在时长计算,基音提取,清浊音判别上尝试了新方法,在已有声调识别方法上做了改进。此外,本文分别建立了正常说话人和聋儿语音数据库,并在此基础上完成了测试对比实验,实验表明本文提出的方法达到了满意的处理效果。最后,本文介绍了系统的实现及使用情况,提出下一步研究内容。