基于FPGA的数字视频异步帧频转换器设计

利用DVI接口的同步控制信号生成内存写入地址,帧频触发信号控制内存读取地址的设计思想,在FPGA中实现了从任意帧频的数字视频源转换到50 Hz或60 Hz帧频.给出了帧频转换器的基本硬件结构,和实用的设计方法,并讨论了数据缓冲区设置深度与内存操作带宽的关系.     

基于视觉特性的真实影像再现技术进展及展望

视觉特性研究的成果,融入到真实影像再现技术,可提供更适于人类观察的高品质图像,有利于机器视觉的研究。首先简单总结当前主要的视觉特性研究成果,包括视觉空间对抗、光谱对抗、视觉适应、视觉皮层初级处理等。综述了基于视觉特性的真实影像再现技术的研究动态和新进展,并根据算法的侧重点不同,分析了以保持颜色恒定性为主要目标的Retinex系列算法、各种动态范围压缩算法等。其中也涉及到已开展的部分工作,从原理分析、实验效果对比等角度,对研究成果与国外优秀算法做出评价。介绍了国外在软/硬件平台实现上的最新研究成果。简述进一步开展的工作及研究方向,并就其发展方向做出展望。     

基于特征区域分割的立体视频视觉舒适度评价方法

为准确反映人眼在观看立体视频过程中的视觉舒适程度,提出了一种基于特征区域分割的立体视频视觉舒适度评价方法。首先自适应地分割提取出立体视频序列中的人眼的感兴趣区域,以及相邻帧间的运动区域,然后结合深度感知理论和空间合并技术,对视觉舒适度这一特征量进行建模,最后实现对立体视频视觉舒适度的评定。实验结果表明,使用本文的方法对立体视频视觉舒适度进行评价,可以很好的模拟人眼直接观测的视觉感受,对于视觉舒适度的研究具有重要的参考价值。     

“视景仿真”课程教学设计方案

本文提出"视景仿真"课程教学设计方案和教学创新思路。我们通过理论联系实际、结合实际研究课题、开拓学生在视景仿真领域学习的知识面,加深学生对视景仿真技术的理解,培养学生理解和运用视景仿真知识的能力。课程教学内容安排循序渐进、由浅入深,教学手段形象生动。教学实践表明,本课程的建设内容合理,在教学中取得了良好的教学效果。     

构建互联网视听节目集中监管平台的探索和设想

随着互联网技术的发展,互联网视听节目的传播手段、内容、形式也发生了巨大变化。在监管系统建设构成中针对不同的传播方式,适时建设相应的专项监管系统,多个功能专一的监管系统,给使用和信息的互联互通带来很多不便,造成工作效率低,信息资源不能充分发挥作用。针对广电系统内视听节目监管系统存在的问题以及缺乏全局的、系统化的解决方案的现状,提出构建互联网视听节目综合的集中监管平台,主要是建设“互联网视听节目信息资源库”,以及“监管数据集中分析处理系统”和“监管业务集中处理系统”两个系统,实现对各类海量视听节目数据快速分析处理,更加准确地掌握各类视听节目网络传播的数量、动态、范围、影响等情况,综合提升舆情分析能力,提高监管效率。     

Depth video spatial and temporal correlation enhancement algorithm based on just noticeable rendering distortion model

Spatial and temporal inconsistency of depth video deteriorates encoding efficiency in three dimensional video systems. A depth video processing algorithm based on human perception is presented. Firstly, a just noticeable rendering distortion (JNRD) model is formulated by combining the analyses of the influence of depth distortion on virtual view rendering with human visual perception characteristics. Then, depth video is processed based on the JNRD model from two aspects, spatial and temporal correlation enhancement. During the process of spatial correlation enhancement, depth video is segmented into edge, foreground, and background regions, and smoothened by Gaussian and mean filters. The operations of the temporal correlation enhancement include temporal–spatial transpose (TST), temporal smoothing filter and inverse TST. Finally, encoding and virtual view rendering experiments are conducted to evaluate the proposed algorithm. Experimental results show that the proposed algorithm can greatly reduce the bit rate while it maintains the quality of virtual view.     

基于深度感知和主观评价的影响立体图像舒适度的视差范围研究

立体图像的视差很大程度上决定了立体图像的视觉舒适度,本文从定量的 角度对影响立体图 像舒适度的视差范围进行了研究。首先对源立体图像采用像素平移方法得到测试立体图像集 ,通过大量的 主观实验得到测试立体图像的舒适度平均意见得分(MOS,mean o pinion score)值;其次,基于视觉显著性特点,采用自适应权重立体匹配方 法计算各区域的视差值,以测试各区域视差值对整幅立体图像舒适度的影响程度;最后通过 转换公式将舒 适立体图像的视差范围转换为视差角形式,以便将本文方法推广到其他类型的显示设备。实 验结果表明, 在实验所用显示设备中,满足舒适要求的像素平移量为－40～90(左 移40pixels至右移90pixels);当 立体图像中心显 著区域的水平视差在－0.3882°～0.851范围内时, 其舒适度在可接受范围内,而视差范 围为－0.2713°～0.781时舒适度达到最佳;最后将本文方法推广到常用显示设备,并给出了常用显示设 备的舒适视差范围,为立体图像和视频的制作提供了可靠依据。     

基于支持向量回归的立体图像客观质量评价模型

立体图像质量评价是评价立体视频系统性能的有效途径,而如何利用人类视觉特性对立体图像质量进行有效评价是目前的研究难点。该文根据图像奇异值有较强稳定性的特点,结合立体图像的主观视觉特性,提出了一种基于支持向量回归(Support Vector Regression, SVR)的立体图像客观质量评价模型。该模型通过分析立体图像的视觉特性,提取左右图像的奇异值作为立体图像的特征信息,然后根据立体图像的不同失真类型情况对其特征进行融合,通过SVR预测得到立体图像质量的客观评价值。实验结果表明,采用该文提出的客观评价模型对立体数据测试库进行评价,Pearson线性相关系数值在0.93以上,Spearman等级相关系数值在0.94以上,均方根误差值接近6,异常值比率值为0.00%,符合人眼视觉特性,能够很好地预测人眼对立体图像的主观感知。     

基于三维分层图模型的复杂情况下多运动目标跟踪

复杂情况下的多运动目标跟踪是视频监控中的关 键问题,在多目标运动中相互遮挡时二维视觉信息容易丢失而造 成无法准确跟踪识别目标。本文采用kinect摄像机获取三维视觉信息,从节点、边、空间结 构三个层次上建立目标的三维分 层图模型表征目标的三维特征,并在每层进行通过视频帧间的匹配从而获得三维分层图模型 匹配结果,并根据匹配结果先初 步分析目标跟踪情况,如发生遮挡则通过遮挡区域聚类块与三维分层图模型中各特征匹配确 定其匹配结果,从而得到多运动 目标在复杂运动情况中的跟踪结果。实验表明,在实验室kinect拍摄的视频序列上当目标出 现遮挡等复杂情况,也能取得较 好的跟踪结果,在实验视频中比经典方法的跟踪总体性能指标改善约3%,说明本方法能较好 地实现复杂情况下的多运动目标跟踪。     

基于注意力学习的正则化相关滤波跟踪算法

边界效应是制约相关滤波跟踪性能的一个重要因素.目前大多数方法只是简单地采用先验知识,如逆高斯分布,预设掩模等,或者分割前景目标作为正则化项,进行约束求解,并没有考虑目标的空时域特性.针对这一问题,本文提出一种基于注意力学习的正则化相关滤波跟踪算法.该方法考虑目标在空间中的分布特性,利用注意力机制学习目标的特定空间权重,适应目标在空域中的变化;同时利用目标在时域中的连续性,通过对注意力权重矩阵的约束来间接调整滤波器;最后通过交替方向乘子（ADMM）算法迭代优化模型.我们在标准的数据库上进行大量实验,结果表明本文算法能实时跟踪目标,并且在精确度和成功率上都有了一定的提升.