面向言语康复的多模态人机交互系统 |
| |
作者姓名: | 赵剑 王柳 史丽娟 匡哲君 王斯博 孙园园 |
| |
作者单位: | 长春大学计算机科学技术学院,长春130022;长春大学吉林省人体健康状态辨识与机能增强重点实验室,长春130022;长春大学吉林省人体健康状态辨识与机能增强重点实验室,长春130022;长春大学电子信息工程学院,长春130022;长春大学电子信息工程学院,长春130022;长春大学计算机科学技术学院,长春130022;长春大学电子信息工程学院,长春130022 |
| |
基金项目: | 国家自然科学基金;吉林省教育厅科学技术研究项目;吉林省教育厅高教改革课题项目;吉林省科技发展计划 |
| |
摘 要: | 为解决现有言语康复训练过程中感受声带振动通过触摸的方式依靠主观评定,不能客观反映声带振动过程的问题,本文在音视频反馈基础上,提出了一种以音视频反馈融合振动反馈的多模态人机交互系统,采用三维虚拟头像实现音视频反馈及振动马达实现声带振动反馈的多模态人机交互训练模式,从而辅助听障生完成发音康复训练。实验结果表明,该系统及装置对提高听障生言语康复训练效果具有有效性。
|
关 键 词: | 言语康复训练 音视频反馈 振动反馈 多模态人机交互 |
本文献已被 CNKI 万方数据 等数据库收录! |
|