多视点视频编码的研究现状及其展望

阐述了多视点视频编码(MVC)的主要研究问题.其中首先介绍了MVC的体系结构和发展过程;然后详细讨论了MVC的研究内容,包括预测结构、提高MVC编码效率的技术和高层语法;最后在总结MVC研究现状的基础上,提出了MVC在3D视频应用中的研究思路.     

一种新颖的无线OFDM信道H.264/AVC视频传输技术

提出一种空间域频域时间域三重数据交织的无线OFDM视频传输新方法.空间域交织将视频数据在图像空间域的突发误码均匀化;相邻OFDM子信道交织传送视频slice,即频域交织,有利于时间和空间的错误掩盖技术的实现;同一OFDM子信道在时间上交织传送不同序号的slice信息,即时间域交织,能提供可靠的参考帧进行帧间预测编码,防止帧间误码扩散,同时也有利于误码掩盖技术的实现.将以上的三重交织技术和反馈的多参考帧选择技术以及错误掩盖技术结合起来构成视频传输系统,能有效地提高视频通信的抗误码能力.仿真结果表明,在不同信道条件下,提出的方法能使OFDM无线信道上传输后恢复视频的PSNR提高4 dB以上.     

基于最邻近帧质量增强的视频编码参考帧列表优化算法

帧间预测是视频编码的核心模块,其利用参考帧的重建样本来预测当前图像样本,从而通过传输少量预测残差数据表示复杂视频内容。在有损视频编码中,参考帧质量受到量化失真的影响,导致预测精度较差,影响编码性能。针对低时延视频业务,提出一种基于最邻近帧质量增强的参考帧列表优化算法,通过基于深度学习的卷积神经网络增强与当前帧最邻近参考帧的质量,并将增强后的高质量帧整合到当前帧的参考帧列表中,提高了帧间预测精度。以高效视频编码H.265/HEVC参考软件平台HM16.22为参考基准,所提算法在Y、Cb、Cr这3个分量上可分别节省9.06%、14.92%、13.19%的编码码率。     

基于轻量级全连接网络的H.266/VVC分量间预测

新一代视频编码标准H.266/VVC引入分量间线性模型(CCLM)预测提高压缩效率。针对亮度色度分量存在相关性却难以建模的问题,提出基于神经网络的分量间预测算法。该算法根据待预测像素与参考像素的亮度差遴选出相关性强的参考像素构成参考子集,然后将参考子集送入轻量级全连接网络获得色度预测值。实验结果表明,与H.266/VVC测试模型版本10.0(VTM10.0)相比,所提算法可提高色度预测准确度,在Y、Cb和Cr上可分别节省0.27%、1.54%和1.84%的码率。所提算法具有不同块尺寸和编码参数均可使用统一网络结构的优点。     

嵌入式视频通信系统的实现

介绍了在VIA C3上实现用户级嵌入式视频通信系统,分别从硬件和软件两个方面阐述了该系统的实现原理和算法,着重于解决软件设计中的难点.结合具体应用环境设计了采集/显示模块;根据视频通信的特点设计了内存管理算法,并对视频编解码器进行优化.实验结果表明,在自主开发的嵌入式视频通信平台上,使用所提出的算法可在VIA C3上实现嵌入式视频通信终端,满足实时视频通信的要求,且已应用于实际产品中.     

基于轻量级全连接网络的H.266/VVC分量间预测

新一代视频编码标准H.266/VVC引入分量间线性模型(CCLM)预测提高压缩效率。针对亮度色度分量存在相关性却难以建模的问题,提出基于神经网络的分量间预测算法。该算法根据待预测像素与参考像素的亮度差遴选出相关性强的参考像素构成参考子集,然后将参考子集送入轻量级全连接网络获得色度预测值。实验结果表明,与H.266/VVC测试模型版本10.0(VTM10.0)相比,所提算法可提高色度预测准确度,在Y、Cb和Cr上可分别节省0.27%、1.54%和1.84%的码率。所提算法具有不同块尺寸和编码参数均可使用统一网络结构的优点。