A scalable architecture for geometric correction of multi-projector display systems

Multi-projector displays allow the realization of large and immersive projection environments by allowing the tiling of projections from multiple projectors. Such tiled displays require real time geometrical warping of the content that is being projected from each projector. This geometrical warping is a computationally intensive operation and is typically applied using high-end graphics processing units (GPUs) that are able to process a defined number of projector channels. Furthermore, this limits the applicability of such multi-projector display systems only to the content that is being generated using desktop based systems. In this paper we propose a platform independent FPGA based scalable hardware architecture for geometric correction of projected content that allows addition of each projector channel at a fractional increase in logic area. The proposed scheme provides real time correction of HD quality video streams and thus enables the use of this technology for embedded and standalone devices.     

基于环视图象的数字相机内参数自定标方法

描述了一种适用于IBR系统的数字相机内参数自定标方法。该方法基于跟踪机机旋转得到的图象系列的特征匹配点以,而不需要标定物。认定在相机旋转过程中,其光学中心是稳定不变的,也即图象中心是固定的,可以事先定标;但容许相机的焦距在各幅图象间有变化,利用真实图象序列进行了实验验证,表明该方法能鲁棒地估算相机内参数。     

一种全景图快速生成算法及其实现

针对柱面全景图拼接提出一种快速稳定的拼接算法。该方法将待拼接的二维图像的灰度值投影变换到一维数轴上，选择特征明显的灰度段作为模板，通过序贯相似性检测进行匹配，并在匹配过程中能够自适应地调整阀值，最后采用线性加权法对图像进行无缝拼接。采用普通相机拍摄的序列图像进行实验，实验结果证明该方法提高了拼接速度，降低了图像亮度差异的影响，使结果图像自然逼真。     

全景视频信息空间模型

全景视频是一种以３６０度实景全景图像为基础来构造虚拟环境的技术，本文讨论了利用它来建立一个可操作、可漫游的虚拟信息空间，并就如何建立该空间模型进行研究。该空间具有立体显示和三维虚拟声音，能够组织、存取、操作和表现多媒体空间数据。     

一种基于频域相关技术的柱面全景图生成方法

在虚拟全景空间的构建中,360°柱面全景图象拼接是一项关键技术。该文通过对拍摄的实景图象做快速傅立叶变换,利用图象互功率谱的相位信息来实现全景图象的拼接,实验表明该方法大大提高了拼接速度,并且能够有效地克服图象间光照变化对拼接的影响,是一种快速实用的全景图拼接方法。     

A 360-Degree Panoramic Image Inpainting Network Using a Cube Map

Inpainting has been continuously studied in the field of computer vision. As artificial intelligence technology developed, deep learning technology was introduced in inpainting research, helping to improve performance. Currently, the input target of an inpainting algorithm using deep learning has been studied from a single image to a video. However, deep learning-based inpainting technology for panoramic images has not been actively studied. We propose a 360-degree panoramic image inpainting method using generative adversarial networks (GANs). The proposed network inputs a 360-degree equirectangular format panoramic image converts it into a cube map format, which has relatively little distortion and uses it as a training network. Since the cube map format is used, the correlation of the six sides of the cube map should be considered. Therefore, all faces of the cube map are used as input for the whole discriminative network, and each face of the cube map is used as input for the slice discriminative network to determine the authenticity of the generated image. The proposed network performed qualitatively better than existing single-image inpainting algorithms and baseline algorithms.     

由抖动图象序列建立自然环境三维真实感全景模型

由真实环境中的现场图象进行三维环境建模是目前国际上研究的热点问题。本文依据合理的运动模型，提出和实现了由包含抖动的摄像机运动下的图象序列建立３Ｄ环境全景模型的两步法。首先通过运动滤波和运动分解获得运动稳定的图象序列，然后采用无特征提取的时空纹理方向精确估计、深度边界确定和遮挡恢复算法，建立全局自然景物的真实感三维环境模型。提出了２种三维全景图象的表示方法，即非阵列方式深度分层区域表示和阵列方式的深度分层布景表示，可用于机器人全局定位的自然路标提取和真实环境虚拟再现的图象合成。该研究推广和结合了外极面图象的方法和全景图象的方法，放宽了对运动的要求，从而可使该种方法适用于室外颠簸的道路环境。和现有运动分层方法相比，避免了该类方法迭代过程中的局部最小化问题，并具有计算和存储效率高，适应性强，算法鲁棒性好的优点。     

基于PC和OpenGL的全景图象360度漫游技术

讨论了利用OpenGL图形软件开发系统在PC机上实现全景图象360度漫游。,探讨了采用基于像素匹配的方法进行图象拼接来生成全景图象,并在此基础上利用OpenGL的纹理映射的技术,将全景图象的一部分作为纹理图象映射到由OpenGL预先构造出的虚拟视点空间上,通过改变纹理图象在PC机上实现虚拟场景的360度任意漫游。     

DSP+FPGA折反射全景视频处理系统中双核高速数据通信

对于嵌入式折反射全景视频处理系统,由于计算量大,一般采用多处理器协同的结构,但在该结构下多个处理器之间需要进行高速的数据通信。该文提出一种基于DSP+FPGA架构的双核高速数据通信方法,该方法通过基于地址总线的控制指令编码解析方法协同双核工作,通过逆向波形分析和基于乒乓缓存的间接DMA通信方式,实现DSP与FPGA之间的双核DMA数据通信。实验结果表明,使用上述方法实现的DSP与FPGA之间数据通信速度高达585 MBps。     

基于图像的虚拟环境建模技术

综述了基于图像的虚拟现实环境的建模技术，并给出了各种模型表示的理论依据和建模过程的定义。把环境表示分为四类：全景图，光场数据库，深度图像和多投影中心图。全景图的生成包括基于图像相关性和基于图像整合变换的算法。光场数据库的分类主要依据全光函数。同时论述了在各种表示下的采样和建模技术。最后讨论了当前建模技术研究的热点及所需要解决的问题。