基于关键词识别的语音到手势的转换

摘要：

针对言语障碍者与正常人的交流问题，提出了一种利用关键词识别技术实现语音到手势转换的方法。首先，对采集到的语音信号，运用关键词识别技术识别出关键词。同时，根据《中国手语》，采用三维建模技术建立关键词对应的三维手势模型。最后，利用OpenGL播放识别出的关键词对应的三维手势模型，从而实现了语音到手势的转换。实验结果表明，字母和数字的语音关键词的平均识别率达到90.1%，转换后的手势平均MOS（Mean Opinion Score）得分为4.4分，能够应用于正常人与言语障碍者的交流。

关键词：识别、手势建模、语音到手势转换

所属期刊栏目：52

分类号：TP391.41;TN912.34(计算技术、计算机技术)

资助基金：国家自然科学基金No.61263036，No.61262055；甘肃省杰出青年基金No.1210RJDA0071。

在线出版日期：2016-11-18（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：146-151,194