| 基于上下文的多通道语义融合 |
| |
| 引用本文： | 张婕,王丹力.基于上下文的多通道语义融合[J].计算机工程与设计,2007,28(1):1-3,35. |
| |
| 作者姓名： | 张婕 王丹力 |
| |
| 作者单位： | 中国科学院,软件研究所人机交互技术与智能信息处理实验室,北京,100080 |
| |
| 基金项目： | 国家重点基础研究发展计划(973计划)
,
国家自然科学基金 |
| |
| 摘 要： | 多通道交互已经成为人机交互领域一个重要的研究方向,对多通道输入的信息进行语义融合是其中的关键问题.提出了一种将上下文与传统语义融合相结合的方法,并将这一方法应用在面向儿童使用的讲故事原型系统中.儿童通过受限的自然语言、笔的勾画等方式进行故事创作.结果表明,笔和语音结合的多通道交互方式能够使得儿童更方便、自然地与计算机进行交互,结合上下文的语义融合方法能够在一定程度上修正输入错误.
|
| 关 键 词： | 多通道交互 多通道语义融合 多通道用户界面 上下文 基于上下文 多通道 语义融合 context based fusion semantic 错误 修正 程度 融合方法 计算机 交互方式 结果 创作 自然语言 原型系统 使用 儿童 应用 |
| 文章编号： | 1000-7024（2007）01-0001-03 |
| 修稿时间： | 2005-12-31 |
Multimodal semantic fusion based on context |
| |
| ZHANG Jie,WANG Dan-li.Multimodal semantic fusion based on context[J].Computer Engineering and Design,2007,28(1):1-3,35. |
| |
| Authors: | ZHANG Jie WANG Dan-li |
| |
| Affiliation: | Intelligence Engineering Lab, Institute of Software, Chinese Academy of Sciences, Beijing 100080, China |
| |
| Abstract: | Multimodal interaction has become an important direction in the field of human computer interaction, and how to fuse multimodal inputs in a semantic level is the key problem. A method that combines context with the traditional semantic fusion is presented, and it is applied to a storytelling prototype for children. Children could create stories with restricted natural language and pen strokes. It concludes that the multimodal interaction combined with pen and voice could make the communication between children and computer more convenient and natural, and the context-based semantic fusion method could correct input errors to some extent. |
| |
| Keywords: | multimodal interaction multimodal semantic fusion multimodal interface context |
| 本文献已被 CNKI 维普 万方数据 等数据库收录！ |
