MDE-VR:面向虚拟现实的多显示环境

针对目前虚拟现实领域缺乏可用的中间框架对底层MDE和高层的本地协同工作模式进行支持这一问题,设计并实现了一个多显示环境下基于虚拟现实的系统框架MDE-VR;基于该框架提出了一种多显示环境下的本地协同工作机制,组合了空间无缝交互技术和空间内聚交互技术两种不同的交互技术,方便用户操纵公共显示屏幕;最后开发了一个系统原型能够有效支持面向虚拟现实的同一地点的多人协同工作。实验结果表明了提出的MDE-VR框架和交互技术的可用性。     

基于视觉的互动游戏手势界面工具箱

分析了视觉手势的交互特征,提出了非接触型设备交互模型,基于数据流图方法建立了支持连续信息输入的数据流模型来描述视觉手势信息的处理流程,基于"paint-view-correct"隐喻构建了手势界面开发工具IEToolkit.系统的主要特点包括:使用插件设计思想提供了可扩展的接口,方便开发人员对系统进行扩展:实现了对平台...     

基于TUI的场景规划系统中的交互技术

单摄像头条件下,基于桌面TUI,划分出4类具有不同场景语义的用户界面操作实物;分析实物用户界面中执行通用交互任务的特点,建立支持4类语义的3层系统设计框架;结合场景规划系统自身特征,设计了4类承载上述场景语义的标记,并提出标记任务分配策略;为解决大场景与小视域之间的矛盾,结合paddle技术,提出动态比例空间、动态成组、双手交互和遮挡处理等交互技术;借鉴认知心理学原理,提出时空复用交互技术;开发基于TUI的交互工具箱,并进行了应用验证.     

UIDT:一种基于摄像头的用户界面模型

为了弥补WIMP界面模型对视觉交互描述的不足,提出一种基于视觉交互的用户界面模型．首先在分析和总结视觉交互过程的基础上,以活动理论为基础,提出一种以用户为中心、面向任务和基于事件驱动的用户界面模型;然后描述了该模型的组成结构及其相互关系;最后给出了一个基于此模型的视频手势交互系统实例．实验结果表明,该模型能够有效地支持视觉交互设计,使用户界面满足可用性要求．     

图形编辑过程冲突消解策略研究*

冲突是协同图形编辑系统中的常见现象,合理地解决冲突是图形协同编辑的关键问题。讨论了协同图形编辑系统冲突消解问题,主要研究内容包括基于时间和空间干涉的冲突检测策略、交互事务分组策略,以及基于事务相关树的冲突消解策略。最后以手势为交互手段开发了一个采用冲突消解策略的协同图形编辑原型系统,目前该系统已经试用。     

产品外形协同设计系统的研究与实现*

提出了协同设计工作模式,给出了系统的工作流程,定义了用户的权限分配,研究了基于交互日志的传输方式,讨论了协同设计过程中的实时更新机制.最后采用了基于MVC的体系结构构建了一个原型系统,该系统在实际应用中,验证了该技术思路的正确性.     

一种肤色干扰下的变形手势跟踪方法

介绍了一种基于单目视觉的肤色干扰下的变形手势跟踪方法。根据跟踪过程中所用到的基本手势特征,提出了一种基于PGH（成对几何直方图）的静态手势识别方法。为了解决跟踪过程中的肤色干扰问题,实现了基于Kalman滤波器的手势预测跟踪。为了解决跟踪过程中的初始化问题,提出了一种基于层次结构的跟踪初始化解决方案。实验结果表明,该方法能够在肤色干扰的情况下有效地对变形手势进行跟踪,并能够满足基于视觉的实时人机交互的要求。     

基于视觉的手势界面关键技术研究

针对视觉手势界面存在的问题,提出了一套行之有效的解决方案.首先,为了解决视觉手势交互中的MidasTouch问题,以人类注意的信息加工模型为理论依据提出了一个可扩展的视觉手势交互模型,该模型将手势交互过程分为选择性处理、分配性处理和集中处理3个不同阶段;然后,基于该模型提出了一个视觉手势识别框架,并结合认知心理学从手势检测、跟踪和识别3个方面对该框架的各个组成模块的关键技术进行了阐述,其中手势检测模块和识别管理模块能够辅助系统在复杂的背景中滤除掉不相关信息而选择性地搜索人手并根据上下文信息对手势识别任务重定向,从而避免了系统时刻都处于激活状态并对所有的手势动作都进行识别分析,有效解决了Midas Touch问题.文中介绍了使用该方法实现的IEToolkit手势界面工具平台,并基于一个视觉手势交互系统进行了实验测试与评估,结果验证了文中方法的可用性.     

智能手机背面屏盲打输入法键盘布局设计研究

目的 目前基于移动设备背面屏输入技术的相关研究,大多集中于其在物理键盘布局或是体型较大的移动设备(如iPad)上的探究,而基于小型移动设备(如手机)的背面屏盲打输入法键盘布局的相关研究并不多见.手机背面虚拟键盘的使用可极大程度释放前屏空间,实现前屏交互任务与背屏文本输入的同步进行.基于此研究意义,探讨智能手机背面屏盲打输入法的可行性及设计方案.方法 通过用户访谈和文本输入测试,采集并分析24167条用户输入数据.结果 智能手机背面屏的横向QWERTY键盘布局为左右拆分式,整体位于双手手持时偏上部的位置.结论 通过对用户在智能手机背面屏盲打输入偏好的研究,可以得出一个具有较强一致性的横向QWERTY键盘布局,为未来背面屏盲打输入法键盘布局设计提供指导.