基于透视的视频增强法

描述了一种新的基于射影空间的视频增强方法,通过图像间对极几何约束以及基础矩阵关系,实现三维图形对象和视频叠加。该方法采用了Pinhole像机模型和射影几何约束条件方便地实现虚拟物体的重投影,而且不需要像机的标定参数和环境对象的3D位置,克服了仿射空间近似所带来的视觉误差和使用限制。     

面向室外视频监控的背景重构算法

 针对室外视频监控环境复杂,运动对象检测准确性较低,提出一种用于背景减运动对象检测的背景重构算法.综合考虑像素点亮度的稳定状态持续时间和出现频率,定义加权亮度直方图确定量化区间的背景概率,根据背景概率大小和分布,结合基于亮度空间相关性的修正实现背景重构.实验结果表明,重构的背景有效地克服了训练阶段运动对象的干扰,用于运动对象检测能够适应背景扰动、摄像机轻微晃动等复杂情况,提高检测的准确性.     

烟草行业高清视频会议室的设计要点

一、引言高清视频会议系统能够支持720P及以上的视频标准、H.264编解码等技术,实现在有限带宽条件下的视频稳定传输,清晰的画面质量、同步音效和最低时延,能够最大程度上帮助与会者保持注意力并提供高效、高质量的视频会议体验。近几年来,烟草行业对视频会议的需求越来越大,会议内容主要集中在以下几方面:会议精神传达、交流讨论、QC竞赛发布、培训、讲坛等等。这些会议内容经常需要对与会者的动作、神态、声音以及双流画面     

虚拟演播室中节目主持人或演员与虚拟场景融合的一种技术方案

研制了用跟踪器和测距器改进传统BETACAM摄像机并与主机软件模块链接的虚拟演播室系统，提出了相机-后相机偶合对模型以解决节目主持人对虚拟场景的融入问题并与实际BETACAM摄像机进行捆绑，导出了以实拍BETACAM摄像机投影中心点深度信息为区分界限的虚拟场景前景帧缓存和背景帧缓存的成像公式，达到了实拍节目主持人视频图像与虚拟场景的计算机CG图像在空间位置及其透视投影关系、图像对象掩模关系上的实时一致的效果，实验结果表明文中所研制的虚拟演播室构造技术是可行的，比目前已有的基于抠像及与背景合成的视频编辑技术的虚拟演播室技术更为理想和实用。     

基于空间对象的虚拟会议音频重建

提出了一种基于空间音频对象的虚拟会议音频重建模型,以提高虚拟会议合成音频的真实感.首先,根据虚拟会议的特点给出了合成会议音频的方法;然后,根据空间音频对象编码的原理,使用空间音频参数双耳声级差针对每个听者重建其空间声场.     

基于视角方向的全景虚拟视图合成

针对3DOF+视频搭建了一套基于视角方向的全景视频虚拟视图合成系统,利用极少视点位置的视频信息即可准确渲染任意视点位置的视频内容,从而为用户提供真实的观看体验。将所合成的新视点位置视图与相机采集的真实视图进行比较。实验结果表明,所合成的虚拟视图平均客观指标PSNR为23dB左右,主观质量良好,较为真实且能够提供良好的交互性与视觉体验。     

面向投影环境的计算机视觉交互信息获取

针对面向投影环境的视觉交互信息获取问题,提出了一种基于前景检测和立体视觉的体感交互信息获取方法.该方法使用双摄像头实时完成投影环境下的人体前景检测、姿势识别以及三维空间定位,能够为人机交互提供人体位置信息、姿势信息.为了验证该方法的有效性,设计并实现了一套虚拟场景视点控制系统.实验证明,该方法能够满足用户与虚拟场景实时交互的需要.     

基于三维图像处理的虚拟人物重构改进方法

针对传统虚拟人物重构方法能够进行人物的重构,但存在虚拟人物重构效果较差的问题,提出基于三维图像处理的虚拟人物重构改进方法。通过三维图像重构关键节点,对虚拟人物重构标准点进行捕捉并标记;确定三维虚拟人物图像边缘算子,标定重构轮廓区域,突出重构背景效果;优化三维虚拟人物图像渲染过程,降低纹理映射对重构图像造成的虚影影响;对图像效果进行明暗处理,增加重建图像质感比例,实现虚拟人物的重构。仿真实验结果表明,设计虚拟人物重构改进方法具有良好的三维重构效果。     

亚奈奎斯特采样雷达的运动目标回波信号的快速重构

亚奈奎斯特采样雷达是利用回波信号的稀疏性,基于模信转换系统发展起来的欠采样雷达系统.本文研究亚奈奎斯特采样雷达的运动目标回波信号的快速重构问题.与单脉冲回波重构不同,运动目标在脉冲积累时间内可能产生跨距离单元现象,使得回波信号表示系数呈现稀疏时变性.本文采用概率分布模型描述稀疏位置的变化,首先将多脉冲回波信号重构转化为加权稀疏重构问题;然后根据分段滑动重构思想,提出一种基于正交投影的加权稀疏分段滑动重构方法来实现快速重构.该方法利用前一个脉冲稀疏位置估计信息,构造分段产生干扰的正交补空间,将子段压缩测量投影到构造的正交补空间,有效地抑制了相邻段引入的干扰.数值仿真验证了方法的有效性.     

机载视频特殊显示方法研究

针对当前基于专用ASIC的视频显示OSD方法不能满足机载环境和特殊功能要求的难题,提出一种基于FP-GA的视频OSD实现方法.新方法将前端输入的原始视频数据和当前模块的OSD数据分层处理,然后在显示终端再混合,能够实现OSD对象的可控透明显示和特殊符号定制.实验证明该方法不仅占用FPGA片上资源少,显示效果非常好,而且完全满足机载环境要求.     

Virtual Stage: a location-based karaoke system

Virtual Stage is an extended karaoke system based on virtual reality technology. A participant becomes the main character in an interactive music video. While singing along with the song played by Virtual Stage, the participant uses body movements to interact with the virtual characters, which reside in a virtual environment and behave intelligently. In Virtual Stage, the participant's video image, grabbed by a video camera, is composited with the rendered image of the 3D virtual environment. Participants will see the realistic video image of themselves and get a false feeling of immersion, as if existing in the VE     

Video conferencing systems

In this paper several video conferencing systems are discussed. These include single person-camera, voice-switched, split-screen, continuous presence, and virtual space systems. Special emphasis is placed on the more recent video conferencing systems, i.e., the continuous presence and the virtual space systems. The role of digital signal processing in the video conferencing environment is discussed. The interaction between service definition, the video conferencing system, and the digital signal processing requirements is highlighted.     

Video object transmission by means of virtual reality based object extraction

This paper presents a new technique to extract objects from a real complex background so that a video sequence can be decomposed into a set of objects as required for object oriented video compression techniques. The proposed method is based on a background subtraction technique. However, instead of using a fixed background, the system relies on predicting one from a previously constructed virtual model of the environment. Thus, camera movements are allowed. These movements are estimated by means of a tracker device. We also present the virtual model construction technique for indoor environments. The method has been successfully tested for several different video sequences including capture errors, partially mapped virtual environments and camera positioning errors. Further work will focus on extending the virtual models not only to environment, but also to objects, and integrating the method in a MPEG4 standard compression system.     

基于视景仿真技术的虚拟激光投影动态交互方法北大核心CSCD

虚拟激光投影在动态交互时,易用性差、鲁棒性低都会导致交互方法的交互性能变差,为提高激光投影交互效果,提出基于视景仿真技术的虚拟激光投影动态交互方法。利用VEW方法采集激光投影视频图像,利用加权平均法对采集到的视频图像背景去噪,并基于红绿蓝三原色建立视频的RGB彩色空间模型,对背景去噪后的图像灰度转换后,进行阈值分割;依据预处理结果确定激光投影中心点位置,通过投影的中心点映射,实现投影动态交互;使用视景仿真技术对交互场景图像的交互效果实施增强,提高激光投影的动态交互性能。实验结果表明,运用该方法开展激光投影动态交互时,交互性高、易用性好、鲁棒性高。     

Interactive collaborative media environments

Virtual reality (VR) provides a revolutionary interface between man and machine. However, present display and interface peripherals limit the potential of virtual environments within many activities or scenarios. Mainstream immersive VR is centred on head mounted display (HMD) based solutions in which the user is isolated from their surrounding environment. The occlusion of real world interaction within such systems imposes unnatural social and physical constraints on the user. Media environments can be classified as one form of enhanced reality based around immersive physical spaces intensified for effective collaborative activities. Current research is directed at three forms of enhanced spaces — immersive projected displays, interactive video environments, and immersive desktop environments. While HMD and desktop VR facilitates many collaborative tasks, the synthesis of real and virtual realities within a life-size environment offers distinct advantages within other applications. This paper introduces the concepts behind media environments, reviews current research and presents applications being explored at BT Laboratories.     

基于ACR的多屏同步互动应用技术浅析

近年来,以家庭融合网络和智能终端为载体,联通网络虚拟社会和现实生活环境,面向家庭提供文化娱乐、生活消费、社区公益等综合服务的数字家庭服务形态成为了焦点。本文重点分析了数字家庭服务中的多屏同步互动应用技术,包括系统总体架构,基于云的平台架构,音频水印、视频水印、音频指纹、视频指纹四种ACR技术以及相关应用业务,并对多屏同步互动应用的趋势和发展进行了探讨,为日后基于自动内容识别技术的多屏同步互动应用实现与改进提供了参考。     

自主学习与局域情境感知的智能虚拟主体架构

为更好地适应动态变化的复杂虚拟环境,提出了同时具有自主学习和局域情境感知功能的智能虚拟主体系统架构,介绍了相关工作及进展,讨论了系统架构和各主要功能模块,通过IVA原型系统自主学习和局域情境感知功能所涉及的关键技术的具体实现,验证了该架构的有效性和实用性。     

新一代(第四代)人机交互的概念框架特征及关键技术

人机交互是研究人与计算机之间通过相互理解的交流与通信,在最大程度上为人们完成信息管理,服务和处理等功能的一门技术科学.本文给出新一代(第四代)人机交互的概念框架和其四个标志性特征,即:(1)具有多模感知(听觉,视觉,手势,笔势等)功能的人机交互方式;(2)可进行基于Agent的听、视觉对话,作为人机交互的界面;(3)具有Internet数据仓库和基于内容检索的知识处理能力,作为人机交互内容;(4)可以在二维或虚拟的三维环境中实现人机通信,作为人机交互的环境.文中给出了解决和实现该四大特征的关键技术,描述了实验系统平台的全面功能,可以为同类研究人员作参考.     

基于Access Grid的通用视频会议系统研究

网格(Grid)旨在实现动态多机构虚拟组织中的资源共享和协同问题解决,Access Grid是网格的一个扩展,能支持在网格上进行组与组之间的协同工作.重点介绍了Access Grid的基本架构,并设计了基于Access Grid的通用视频会议系统.     

虚拟现实视频的制作和应用场景分析

目前,我国科技水平已经上升到了前所未有的高度,同时也推动了现代信息技术的飞速发展,许多先进的信息传输技术和图像处理技术都得到了质的飞跃。在大数据时代背景下,虚拟现实技术得到了全面推广,并在各个领域都得到了极大的突破,随着虚拟现实视频的引入,为观赏者带来了前所未有的视觉盛宴,让用户体验可交互式视频体验。我国当前的虚拟现实视频包括全景3D视频、非全景3D视频、局部全景3D视频、VR全景视频以及全景3D交互视频等,按照交互体验来看,又分为强交互视频与若交互视频。虚拟现实视频是基于虚拟现实技术为基础,通过不同场景视频的制作,在影视、直播、综艺等多个领域中都有着广泛的应用。主要针对虚拟显示视频的制作和应用场景进行探究。