交互式立体显示中基于图像拼合的视点合成

在立体显示中,视点合成是实现交互性的关键技术,即在三维(3D)场景中通过自由选择视点而获得环视能力.本文将视点插值和基于图像拼合的视点变形技术相结合,提出一种中间视合成算法.首先均匀化原始立体图像对;然后只对前景对象区域进行视差估计以提高视差匹配的速度和精度;接着确定左右视点中的可靠区域,根据可靠区域生成过渡中间视点;最后,采用视点插值结合变形的方法,由过渡视合成中间视点.实验结果表明合成的中间视点图像质量良好,而且合成速度也明显提高.本文算法可用于实时 3D 视频应用的交互式立体显示,可以实现任意视点的实时绘制.     

人脸的表情与年龄变换和非完整信息的重构技术(下)

非完整视点信息的重构技术可以利用少量的对象视点信息,结合统计学的理论方法对缺失视点信息进行预测和恢复.该文探讨了从单幅2D人像恢复其它视点图像并重构3D形态效果的技术,提出了非完整人像视点续变的技术框架,通过大视点数据库的离线创建,单视点输入的模型匹配,以及大视点空间映射与连续视点重建三个模块,从单视点合成连续的多视点图像.该技术以尽量少的人像2D信息获得高真实度的3D效果,绕过了3D模型重构,可恢复出未知人脸表面的纹理信息.最后结合AIAR人像库的实际建库经验,讨论了人像数据的采集技术和分类方法,提出了在有限拍摄条件下的人像库建立方法与建库实例.     

基于纹理平滑度的视点合成失真优化快速算法

针对3D-HEVC中深度图编码采用的视点合成失真优化方法的高复杂度问题,提出一种基于纹理平滑度的快速算法。首先结合帧内DC预测特性和统计学方法分析平坦纹理图中像素规律并设定基于纹理图平坦度的跳过准则;然后在深度图编码采用视点合成失真优化方法时提前分离出纹理图平坦区域所对应的深度图区域,并终止该区域像素基于虚拟视点合成的视点合成失真计算过程。实验结果证明该算法的有效性,能在保持编码质量的同时减少大量编码时间。     

DIBR中基于平面扫描的深度重建方法

提出一种 DIBR 中基于平面扫描法的深度重建方法,与立体深度重建算法和基于图像的视觉壳算法不同,本文进一步改进平面扫描算法,无需任何场景的几何先验知识,而是利用每个像素点的深度信息合成真实场景的虚拟视点.当输入图像映射至相互平行的虚拟深度平面时,采用"动态判决方法"来计算像素间的色彩一致度;并在虚拟视合成中采用了基于视向权重策略的新视点重建方法.本文算法获取的深度信息更为精确,虚拟新视点的质量得到较大提高.     

基于图像的中间视合成方法综述

中间视合成是多视点显示中的一种关键技术,广泛应用于三维电视和三维远程视频会议系统中.分析了中间视合成方法的研究现状,讨论了基于图像插值的中间视合成中存在的问题,展望了进一步研究的方向.     

基于视角方向的全景虚拟视图合成

针对3DOF+视频搭建了一套基于视角方向的全景视频虚拟视图合成系统,利用极少视点位置的视频信息即可准确渲染任意视点位置的视频内容,从而为用户提供真实的观看体验。将所合成的新视点位置视图与相机采集的真实视图进行比较。实验结果表明,所合成的虚拟视图平均客观指标PSNR为23dB左右,主观质量良好,较为真实且能够提供良好的交互性与视觉体验。     

基于光栅的手机多视点立体显示技术研究

研究了基于多视点立体视频处理系统的手机客户终端显示技术。针对现有的8视点光栅立体手机显示技术的缺陷,在原有8视点立体图像合成算法的基础上,研究视差原理及校正方法和视点配对原理,采用调整视点间视差和减少视点数两种解决方案,并提出将两种方案进行结合的方法。经实验验证,本文提出的两种方法在保证原有立体显示效果的基础上,大幅度提高了立体显示的舒适度。     

一种裸眼3D电视系统的设计方案

本文提出一种裸眼3D电视系统的设计方案,详细阐述了方案的原理及关键技术的实现.方案系统先将电视信号处理成单视点或双视点图像,然后将单视点或双视点图像转换成N个视点图像,并将N个视点图像交织成一幅合成图像来驱动裸眼3D屏发出图像光实现裸眼3D显示.该方案可快速应用于柱状透镜式和光栅屏障式裸眼3D电视产品,具有广泛的应用价值.     

一种基于时间导向的DIBR空洞填补方法

在立体成像系统中,填充新视点合成时图像中产生的空洞是虚拟视点合成技术的重要环节,已有方法是对空洞区域周围的像素进行水平的推测运算来得到填洞像素,其正确率不高而且容易造成图像边缘失真。提出一种基于时间导向的DIBR空洞填补方法,首先通过结构相似帧的方法得到与关键帧拥有相同背景的前后帧图像,然后比较空洞位置对应的前后帧图像的深度值,利用背景信息对空洞区域进行填补。实验结果表明,新方法得到的填补后的图像效果可以较为真实地还原特定的场景,与原始视点的结构相似性可达到91.36%,比传统方法提高了8.38%。     

构造全局背景的虚拟视点合成算法

虚拟视点合成技术是三维电视、多视点视频等诸多领域中的关键技术。目前,基于深度图像的绘制(DIBR)受到了广泛的关注,而这一技术的主要难点在于如何降低映射过程中产生的空洞。为解决这个问题,提高合成图像的质量,同时降低所需参考视点的数量,本文提出了一种基于全局背景图像的虚拟视点合成算法。首先,我们利用视频序列的帧间互补信息生成一张全局背景图像,并以此为辅助图像,去填补从参考视点映射到虚拟目标视点的各帧图像。与传统方法相比,本文算法能使用空洞区域对应的真实像素进行填充,提高了图像的质量。最后,对填补后仍余留的空洞采用图像修复算法进行处理,得到最终的虚拟视点图像。实验结果表明,这个算法优于传统算法,并且只利用了一个参考视点。