基于具身认知的博物馆自然交互设计研究

具身认知强调了身体-环境-认知之间的相互联系，主张在特殊环境中身体的感知状态与物理属性对认知的形成有根本影响，为传统展示形式造成用户感知受限的博物馆环境中的自然交互设计研究提供理论参考。文章从具身认知视角出发探索博物馆中的自然交互设计方法，首先采用VOSViewer软件分析具身认知设计近几年相关研究热点与发展趋势，结合用户旅程图法分析现阶段博物馆自然交互展示的痛点与触点，利用具身认知理论提出情景重构、行为沉浸和知觉延伸的具身交互设计策略，最终通过新加坡天福宫具身交互设计作品验证博物馆自然交互设计方法。     

基于Java 3D的虚拟网络电力监控环境设计

虚拟现实技术（VR）是一项以计算机技术为主,利用计算机等设备构建一个三维虚拟世界,并通过人与虚拟世界的交互。实现人与虚拟世界融为一体的技术。本文介绍了应用Java 3D开发的虚拟现实技术,给出了实现该技术场景创建、动画设计和交互设计技术的部分关键代码。该设计具有开发三维视觉、实现用户网络交互的能力,并已经被运用到远程电力监测系统中。该技术也可以被应用到类似的监控系统的开发中。     

基于双手交互的指挥空间响应模型

自然高效的人机交互技术正快速发展,但双手交互技术和应用空间之间在认知上存在较大差距。使双手交互难以被广泛应用。该文对指挥空间进行认知级描述。根据指挥空间双手交互应用背景,按分布式认知和以用户为中心的思想构建一种基于双手交互的指挥空间交互响应模型。以解析的方式描述用户背景知识与交互响应间的关系,为指挥空间内双手交互的设计提供依据。     

分布式虚拟环境综述

1 引言虚拟环境是指用户借助各种直观的输入输出设备,沉浸于计算机生成的真实的或虚幻的三维世界中,漫游其中或与其中的对象交互,从而获得如同在真实物理世界中的体验。虚拟环境也称为虚拟现实、虚拟世界、灵境等,其基本特征可概括为:沉浸(Immersion)、交互(Interaction)和构想(Imagination)。它强调     

虚拟人的建模方法

虚拟现实(Virtual Reality)做为人工智能、计算机图形学、人机接口技术、传感器技术等一系列技术的汇集,对社会发展有着重大的影响。虚拟现实技术是使用计算机生成逼真的三维视、听、触觉等感觉世界,使用户(带有适当的装备,如特制的服装、头盔、手套、眼镜等)可以使用自然的技能对虚拟世界的客体进行交互考察。构造一个虚拟现实系统的基本手段和目标就是利用并集成高性能的计算机软硬件及     

混合现实技术在软件界面设计中的应用

混合现实技术结合了真实世界和虚拟世界,为软件界面设计提供了新的维度和互动方式。本文首先概述了混合现实技术的发展历程及发展趋势,探讨其如何从初步的概念演变成今天的技术现实；其次对软件界面设计的基本概念和原则进行了讨论,强调了设计与用户体验的关系,并对传统的设计方法和工具进行了回顾。深入研究混合现实技术如何影响界面设计,深入探讨了这种技术为设计带来的新理念、对空间认知与交互模式的变革以及如何提升用户体验。最后提出了几种混合现实技术在软件界面设计中的应用方案。     

基于混合现实交互界面的下颌运动仿真系统

针对传统医学可视化仿真系统中交互界面和交互技术的缺点,基于视觉跟踪技术采用实物模型设计和实现了一个基于混合现实界面的下颌运动仿真系统。通过对物理界面元素、虚拟界面元素以及交互隐喻的分析,为混合现实环境下的交互技术建立了一个具有通用性的分类体系。物理与虚拟的界面元素之间通过语义映射将用户的操作从物理世界映射到虚拟空间中,从而为用户提供一种更为直观、自然的交互方式。     

物联网移动设备交互

移动设备和物理设备的交互越来越引人注目,因为它为现实世界的对象提供了一种更自然和直接的服务请求方式.这些服务大多都是设计给特殊的应用领域,并且没有提供描述现实世界服务的通用概念.另一方面,物联网提供了一组标记现实世界对象的标准和方法.这两种技术的结合可以促进移动设备交互的发展和普及.因而,我们提出一个架构,目的是使用物联网来进行移动设备交互.我们使用语义网(Semantic Web)服务来描述物理设备的服务,这个服务的描述接着会被用来自动生成移动设备的用户界面.     

VRML：带给您身临其境的体验

随着信息技术的发展,人们已不满足于从外部观察信息处理的结果,而是希望能通过视、听、触、嗅觉及形体、手势或口令,参与到信息处理的环境中去,获得身临其境的体验。虚拟现实(VirtualReality,VR)技术就提供了这样一种既能创建又能体验虚拟世界的沉浸式交互环境,使用户可以以自然的方式与虚拟环境中的对象交互影响,从而产生等同真实环境的感受和体验。     

虚拟现实技术下的动画交互性设计

当虚拟现实技术与动画融合发展时,交互性、沉浸感就是其不可忽视的目标,但是在当前的创作过程中,创作者通过对于沉浸感的渲染让观者能够有身临其境的感觉,很多人着重研究沉浸感,对于交互性选择直接规避或者忽略不计。其实,创作人只要能够以影像多元素点为基础,将情节进行交互设计,并且通过影片进行传递,便能实现现实世界与虚拟世界交互,切实提升观众的存在感与参与感。笔者重点探讨了虚拟现实技术下的动画交互性设计。     

Cognitive revolution, virtuality and good life

We are living in an era when the focus of human relationships with the world is shifting from execution and physical impact to control and cognitive/informational interaction. This emerging, increasingly informational world is our new ecology, an infosphere that presents the grounds for a cognitive revolution based on interactions in networks of biological and artificial, intelligent agents. After the industrial revolution, which extended the human body through mechanical machinery, the cognitive revolution extends the human mind/cognition through information-processing machinery. These novel circumstances come with new qualities and preferences demanding new conceptualizations. We have some work ahead of us to establish value systems and practices extended from the real to the increasingly virtual/info-computational. This paper first presents a current view of the virtual versus the real and then offers an interpretation framework based on an info-computational understanding of cognition in which agency implies computational processing of informational structures of the world as an infosphere. The notion of “good life” is discussed in light of different ideals of well-being in the infosphere, connecting virtuality as a space of potential and alternative worlds for an agent for whom the reality is a space of actual experiences, in the sense of Deleuze. Even though info-computational framework enables us to see both the real world and the diversity of virtual worlds in terms of computational processes on informational structures, based on a distinct layered cognitive architecture of all physical agents, there is clear difference between potential worlds of the virtual and actual agent’s experiences made in the real. Info-computationalism enables insight into the mechanisms of infosphere and elucidates its importance as cognitively predominant environment and communication media. The conclusion is that by cocooning ourselves in an elaborate info-computational infrastructure of the virtual, we may be increasingly isolating ourselves from the reality of direct experience of the world. The biggest challenges of the cognitive revolution may not be technological but ethical. They are about the nature of being human and its values.     

虚拟服装展示系统的比较研究

虚拟服装展示是借助立体全息技术、互联网或数字互动大屏幕来展示人体或数字角色“穿上”虚拟服装后的动态视觉效果。随着数字媒体艺术、交互技术和立体显示技术的发展,虚拟服装展示系统被广泛用于立体时装设计、服装表演、娱乐秀、商场试衣以及电视广告等领域。本文分析比较了近年来国内外虚拟服装展示领域的技术发展,并归纳总结出当前虚拟服装展示的5种人机交互模式。作者认为：随着全息技术、体感交互、立体视觉和增强现实等智能环境技术的发展,以“私人订制”为代表的个性化、时尚化和智能化的虚拟试衣体验将成为未来人们服装购买体验中不可或缺的重要环节之一。     

浅析交互式虚拟展示设计

随着时代的发展和信息技术的进步,人们的沟通方式正在发生翻天覆地的变化,真实世界与虚拟世界之间的界限也变得越来越模糊。而艺术与设计本身也在不断的演化,技术与艺术之间的融合,促使了新媒体以及数字艺术等众多艺术形式的出现,交互式虚拟展示设计正是在这种背景下应运而生。本文将侧重分析这种新的设计艺术形式的概念、应用以及它对传统展示设计产生的影响。     

面向艺术与设计的虚拟人技术研究

虚拟人(Virtual Human)是人类各种特性(几何、行为、感知、情感、生理、心理、社会性等)在虚拟空间中的数字化表示,是高度真实的人类特性的数字化再现．文中首先介绍面向艺术与设计的虚拟人技术的应用领域和研究维度,然后详细介绍其中的主要研究内容,包括：虚拟人体建模、运动控制技术、虚拟人群仿真、虚拟感知与情感计算,最后指出,在面向艺术与设计的虚拟人技术研究中,艺术与设计领域专家和计算机专家的协作关系．     

Let’s keep in touch online: a Facebook aware virtual human interface

A virtual human is an effective interface for interacting with users and plays an important role in carrying out certain tasks. As social networking sites are getting more and more popular, we propose a Facebook aware virtual human. The social networking sites are used to empower virtual humans for interpersonal conversational interaction in this paper. We combine Internet world, physical world and 3D virtual world together to create a new interface for users to interact with an autonomous virtual human which can behave like a real modern human. In order to take advantages of social networking sites, virtual human gathers information of a user from its profile, its likes, dislikes and gauge mood from most recent status update. In two user studies, we investigated whether and how this new interface can enhance human–virtual human interaction. Some positive results concluded from these studies will be guidelines on research and development of future virtual human interfaces.     

面向智能空间的位置感知方法研究

位置感知是智能空间中的重要技术.在分析了现有基于移动自组网的位置感知方法后,提出了一种基于多维定标(multidimensional scaling,简称MDS)的新的位置感知方法——SSOLA(smart space oriented locationawareness method),可以对智能空间中的无线通信节点进行精确定位,获得节点之间的相对位置(坐标);当有极少数位置已知的锚节点(2 维定标存在3 个以上锚节点,3 维定标存在4 个以上锚节点)时,可以得到全网所有节点的绝对位置(坐标).SSOLA 算法的设计思想是:以MDS 分析为核心,采用Euclidean 测距方法计算节点间距离矩阵,采用1 跳和2 跳局部图相结合的自适应选择机制构建局部图,各节点独立计算局部图,最终合成全局位置图.此外,SSOLA 还可以与OLSR 路由算法相融合,从整体上减轻了SSOLA 算法的执行开销,提高了定位效率.仿真实验结果表明,SSOLA 具有对锚节点依赖小、定位精度高、可扩展性好、执行速度快等优点,对原始测量误差也有较强的鲁棒性,可以应用于战术互联网、智能战场等大规模无线通信环境中.     

数字孪生与生产线仿真技术研究

随着新一代信息技术与制造技术的深度融合,仿真技术正向着信息系统与物理系统深度融合和高效协同的方向发展,应运而生的数字孪生技术成为近年来的新兴研究热点.为探索采用新一代信息技术促进离散制造行业数字化转型升级,从仿真技术的发展脉络和应用场景入手,引入基于数字孪生技术开展生产线仿真分析的研究,介绍了数字孪生技术的概念和内涵,...     

多模态人机交互综述

多模态人机交互旨在利用语音、图像、文本、眼动和触觉等多模态信息进行人与计算机之间的信息交换。在生理心理评估、办公教育、军事仿真和医疗康复等领域具有十分广阔的应用前景。本文系统地综述了多模态人机交互的发展现状和新兴方向,深入梳理了大数据可视化交互、基于声场感知的交互、混合现实实物交互、可穿戴交互和人机对话交互的研究进展以及国内外研究进展比较。本文认为拓展新的交互方式、设计高效的各模态交互组合、构建小型化交互设备、跨设备分布式交互、提升开放环境下交互算法的鲁棒性等是多模态人机交互的未来研究趋势。     

How to model and implement connections between physical and virtual models for digital twin application

Digital twin (DT) is a virtual mirror (representation) of a physical world or a system along its lifecycle. As for a complex discrete manufacturing system (DMS), it is a digital model for emulating or reproducing the functions or actions of a real manufacturing system by giving the system simulation information or directly driven by a real system with proper connections between the DT model and the real-world system. It is a key building block for smart factory and manufacturing under the Industry 4.0 paradigm. The key research question is how to effectively create a DT model during the design stage of a complex manufacturing system and to make it usable throughout the system’s lifecycle such as the production stage. Given that there are some existing discussions on DT framework development, this paper focuses on the modeling methods for rapidly creating a virtual model and the connection implementation mechanism between a physical world production system at a workshop level and its mirrored virtual model. To reach above goals, in this paper, the discrete event system (DES) modeling theory is applied to the three-dimension DT model. First, for formally representing a manufacturing system and creating its virtual model, seven basic elements: controller, executor, processor, buffer, flowing entity, virtual service node and logistics path of a DMS have been identified and the concept of the logistics path network and the service cell is introduced to uniformly describe a manufacturing system. Second, for implementing interconnection and interaction, a new interconnection and data interaction mechanism between the physical system and its virtual model for through-life applications has been designed. With them, each service cell consists of seven elements and encapsulates input/output information and control logic. All the discrete cells are constructed and mapped onto different production-process-oriented digital manufacturing modules by integrating logical, geometric and data models. As a result, the virtual-physical connection is realized to form a DT model. The proposed virtual modeling method and the associated connection mechanism have been applied to a real-world workshop DT to demonstrate its practicality and usefulness.