Android系统立体视频播放关键技术研究

为了解决立体视频在Android系统上的播放问题,对在Android系统进行立体视频播放的关键技术进行了研究.与传统2D视频播放器相比,立体视频播放器的关键技术是立体视频解码和立体视频显示.文中对这两种关键技术的实现方法进行了详细阐述,并据此开发了一款立体视频播放器.该立体视频播放器,支持常见的左/右、上/下格式立体视频,有7种视频显示方式可供选择.该视频播放器在Android 2.3系统的平板电脑上进行了测试,测试结果表明在Android系统上播放立体视频的基本功能均已实现,可以供用户使用.     

基于FFmpeg的立体视频播放技术研究

立体视频播放涉及左右眼图像处理,具有数据处理量大、帧匹配要求高的特点.为了实现立体视频的实时显示,提出了实现左右格式视频画面融合的方法.在分析视频帧数据存储方法的基础上,研究使用FFmpeg视频处理方法,开发播放器主体结构,利用立体视频融合算法实现立体视频播放.     

全高清3D视频转换系统设计与实现

详细阐述了全高清3D视频转换系统的开发与设计,对系统中的FPGA设计,DDR2控制器设计,CPU集成,HDMI输入输出接口设计等关键技术作了分析和介绍,最后对立体显示技术的未来进行了展望.     

基于时空一致性的立体视频稳像改进方法

随着立体拍摄设备的普及,立体影视的后期稳像需求大大增加.直接观看带有抖动的立体视频,极易造成视觉疲劳.利用传统2D稳像方法分别稳像合成的立体视频很可能引入新的垂直视差,并且会导致水平视差的不稳定,大大影响视觉体验.因此,提出了一种改进的立体视频稳像方法,在3D运动模型进行单目稳像的基础上,增强两路视频的时空一致性约束,更好地稳定水平视差及消除垂直视差.最后对稳定后的序列进行合理的裁切放大.对几组不同的立体抖动视频进行了试验,测试结果表明所提出的方法是有效的.     

平面视频的立体化技术研究

针对利用Photoshop软件手工提取深度的精确度不高、造成立体视频闪烁的问题,提出在提取深度之前利用Canny算子进行边缘预分割的改进措施,提高了深度层,尤其是运动对象深度层边界的精度.对合成立体视频的立体显示实验证明改进方法有效地改善了合成立体视频的质量.     

立体视频质量主观评价方案的研究

立体视频质量评价是反映立体视频系统性能的重要指标。由于立体视频的最终观测者是人,因此,判断立体视频质量的最有效方法就是立体视频质量的主观评价,而且立体视频质量主观评价结果是优化立体视频质量客观评价方法的重要依据。基于大脑产生立体视觉的特性,现提出了一套相对完善的立体视频质量主观评价方案,主要包括立体视频数据库的建立、观看条件的确定、评测者的选定、评测者的训练和测试、以及数据处理和实验结果分析。     

基于强化学习的立体全景视频自适应流

针对当前立体全景视频传输缺少有效的流自适应方法,且传统全景视频流自适应策略传输双目立体全景视频使得传输数据加倍,所需带宽巨大的问题,该文提出一种基于多智能体强化学习的立体全景视频非对称传输自适应流方法,以实时应对网络带宽波动.首先,根据人眼对视频显著性区域的偏爱,左右视点中每个瓦片(tile)对立体视频的感知质量的贡献...     

基于背景重构的视频分割技术及应用

针对背景静止的立体视频提出了一种快速的基于背景重构的视频分割算法.先利用帧差法分别确定出左右视频的前景运动区域,再重构出该区域的背景图像,最后,通过视频图像和背景图像的对比来准确地提取运动前景.然后,先匹配左右图像序列的背景图像,并保存它们的匹配结果,再分别对各立体图像对的运动前景进行匹配.采用该方法将立体视频分割可以...     

X波段微型片式T/R组件的设计方法

片式T/R组件是一种新集成形态的微波集成产品,由于采用了基板立体堆叠的三维立体集成方法,具有小、薄、轻的特点,主要应用于星载相控阵天线以及共形相控阵、智能蒙皮等新型电子系统.以X波段微型片式T/R组件设计研究为例,对此类新形态微波集成产品的实现方式进行了阐述.该组件通过采用基板立体堆叠的三维立体集成方法,能在20 mm...     

基于深度信息的实时立体视频传输系统方案设计

以基于深度图像的绘制(DIBR)算法为核心,使用CUDA作为加速器,设计了一套基于深度信息的实时立体视频传输系统.该系统有效地解决了立体视频系统的帧同步问题,也降低了传输处理两路彩色视频所带来的带宽负担.在接收端合成的视频实时性好,主观视觉效果良好.     

基于QNX的车载立体播放技术研究

摘 要: 针对车载播放系统立体性、互连性、智能性的多方向发展趋势,研发一套基于QNX的车载立体播放系统。采用实时性在微秒级的QNX系统作为软件平台;提出系统分层逻辑架构模型,增强模块间的独立性;利用FFMPEG核心技术完成立体视频解码,满足多码流同步实时输出;设计GLES立体渲染容器进行同步实时渲染。实验表明：该方案在有效提高车载视频观感的同时,极大提升了整个车系的科技竞争力。     

立体视觉与立体成像

讲述了主要立体视觉因素的形成机理,导出双目视差关系式,给出了相应参数的约略值,分析了主要参数与立体视觉效果的关系。可供立体成像、制作较符合视觉特性的立体电视节目、高效编码立体电视视频数据流和重显立体视频图像参考。     

Object-based stereo video compression using fractals and shape-adaptive DCT

Based on the classical fractal video compression method, an improved object-based stereo video compression scheme with Shape-Adaptive DCT is proposed in this paper. Firstly, we use more effective macroblock partition scheme instead of classical quadtree partition scheme; thus reducing the block searching strategy. The stereo fractal video coding is proposed which matches the macroblock with two reference frames in left and right view results in increasing compression ratio and reducing bit rate when transmitting compressed stereo data. The stereo codec combines the Motion Compensation Prediction (MCP) and Disparity Compensation Prediction (DCP). Fractal coding is adopted and each object is encoded independently by a prior video segmentation alpha plane, which is defined exactly as in MPEG-4. The testing results with the nature monocular and stereo video sequences provide promising performances at low bit rate coding. We believe it will be a powerful and efficient technique for the object-based monocular and stereo video sequences coding.     

基于运动和视差信息的立体视频质量客观评价

在研究人类 立体视觉特性及现有立体图像/视频质量评价算法的基础上,提出了一种基于运动信息和视 差信息的立 体视频质量的客观评价方法。方法包括视频质量评价(VQA)和视频立体感评价(VSSA)两个指 标,其中VQA的估计基于梯度的结构相似度(GSSIM) 算法,并充分考虑了帧内的亮度信息和结构信息、帧间运动信息以及人眼的感知特性对视频 质量的影响, 特别是根据人类的视觉特性,对左右视点的质量赋予了不同的权重;VSSA的估计 是通过计算参考 视频的绝对差值图和降质视频的绝对差值图之间的峰值信噪比(PSNR)而得到。实验结果表明,本文方法对基于H.264 编码的失真视频的评价结果与主观测试有较高的一致性,很好地体现人眼的视觉特性。     

一种基于MPEG-2的立体视频编码中的视差匹配快速算法

高效，快速的视差匹配是立体视频处理中的一项关键技术。本文在分析立体图像序列的视差矢量与运动矢量之间的相关性的基础上，提出一种基于MPEG-2的立体视频编码中的视差匹配快速算法。实验结果表明，与全搜索法相比，在保证重建图像质量的前提下，快速算法能显著降低视差估计的计算复杂度。     

基于DM642芯片的嵌入式双目机器视觉平台

介绍了基于DM642平台的嵌入式双目立体视觉平台的硬件构成和驱动程序结构的设计和实现.该系统充分利用DM642芯片在图像处理中的优异性能,克服了传统基于采集卡和PC机的图像处理系统的实时性差,处理精度低,保密性差和扩展性差等缺点,其主要的图像处理工作由DSP实现,并可通过多种途径与PC机交互,大大降低了计算机的负荷.该平台采用面向对象的软件设计思路设计硬件,达到硬件重用的目的.     

基于多参考帧的平行立体视频视间编码的实现

Side-by-Side(SbS)是立体视频常用的格式。传统的视频编码方法利用帧内预测或帧间预测对视频进行压缩编码。基于H.264视频压缩编码标准,针对SbS格式的立体视频提出了一种基于多参考帧方式的视间预测编码方法,并在JM测试代码基础上将其实现。实验结果表明,加入视间预测编码后,以很小的PSNR损失为代价,使得SbS视频的压缩效率提高了大约10%～20%。     

一种基于多参考帧的平行立体视频视间编码实现方法

Side-by-Side（SbS）是立体视频常用的格式。传统的视频编码方法利用帧内预测或帧间预测对视频进行压缩编码。本文基于H.264视频压缩编码标准,针对SbS格式的立体视频提出了一种基于多参考帧方式的视间预测编码方法,并在JM测试代码基础上将其实现。实验结果表明,加入视间预测编码后,以很小的PSNR损失为代价,使得SbS视频的压缩效率提高了大约10%至20%。     

基于DirectShow的视频实时校正系统设计

为了解决3D高清立体视频的实时极线校正问题,基于DirectShow的变换过滤器技术,设计并实现了一种针对双路高清立体视频从采集到校正的实时处理系统,其特点是在过滤器内通过GPU实现了校正的并行加速实时处理。分析了DirectShow技术应用在高带宽视频信号的实时采集到处理时的整体体系结构和过滤器间数据传输的流程,进而研究了如何利用DirectShow进行实时的极线校正和播放视频,最终给出了实现方法及实验结果。实验结果表明,设计得到的系统可以完成双路高清视频流从采集卡到GPU处理卡及处理后视频的输出处理功能,具有一定的应用价值。