基于机器学习的立体全景视频自适应流系统

VR技术给人们提供了一种沉浸式体验,但也造成了视频数据量的大幅增加。为了在有限的带宽下获得流畅的VR观看体验,基于机器学习在视频压缩和行为决策上的优良性能,利用机器学习中的深度学习和强化学习方法设计了一个自适应帧重建和传输方案,实现了在不降低视频感知质量的前提下流畅传输立体全景视频。     

关于VR全景视频连续播放的优化算法

VR全景视频作为一种新型的视频方式,其震撼效果毋庸置疑,但客户端的用户体验一直欠佳。为实现iOS和安卓客户端稳定的连续播放需求,本文提出了优化算法,该算法可以更合理地利用移动端硬件资源,减少客户端的网络请求,加快UI页面加载等,由此实现了全景VR视频的连续稳定播放。     

基于最优传输长度的数字反向传输方案

指出传统的数字反向传输方案对光纤进行补偿时不能得到系统的最小误码率,分析了不同反向传输长度对系统性能的影响。提出了基于最优传输长度的数字反向传输方案,并证明了在最优传输长度处能获得最小误码率。仿真结果表明,该方案能够提高系统性能。     

基于FPGA的全景视频拼接系统的防抖动设计

针对因传输线缆长度、外部电磁干扰等因素导致的视频在传输过程中出现抖动,进而引起全景视频拼接系统中某一区域出现拼接错位现象,采用了基于FPGA的软件防抖动设计,在FPGA内部添加乒乓缓存机制,逐帧检测接收到的视频帧的完整性,对抖动情况下视频帧有效像素丢失或超出分别进行处理,在不增加硬件成本的前提下解决视频抖动引起的全景视...     

虚拟现实视频的制作和应用场景分析

目前,我国科技水平已经上升到了前所未有的高度,同时也推动了现代信息技术的飞速发展,许多先进的信息传输技术和图像处理技术都得到了质的飞跃。在大数据时代背景下,虚拟现实技术得到了全面推广,并在各个领域都得到了极大的突破,随着虚拟现实视频的引入,为观赏者带来了前所未有的视觉盛宴,让用户体验可交互式视频体验。我国当前的虚拟现实视频包括全景3D视频、非全景3D视频、局部全景3D视频、VR全景视频以及全景3D交互视频等,按照交互体验来看,又分为强交互视频与若交互视频。虚拟现实视频是基于虚拟现实技术为基础,通过不同场景视频的制作,在影视、直播、综艺等多个领域中都有着广泛的应用。主要针对虚拟显示视频的制作和应用场景进行探究。     

智慧家庭的VR全景视频业务实现

全景视频作为一种新的视频格式极大程度地改变了用户观看视频的方式,可以提升智慧家庭在视频领域的用户体验。IPTV良好的解码能力以及优异的网络支撑等优势对全景视频的应用推广具有积极作用。结合VR全景视频的特点,分析了超高分辨率全景视频在IPTV平台中的技术挑战,同时基于FOV视点自适应框架,结合MCTS编码、多分辨率和多tile视频分发和终端根据视点部分解码tile技术,给出一种IPTV超高分辨率全景业务实现方案。     

VBR视频流量的小波包分解及其长时预测

长时预测是VBR视频流量预测领域中的难点问题.针对其时变、非线性以及长相关性等特点,提出一种多尺度分解的VBR视频业务的特征提取方法.选择具有任意多分辨分解特性的小波包,对其进行空间划分并求解适合视频信号特征提取的最优分解基.基于最优基对视频信号进行快速多尺度分解,得到了各级节点的小波系数矩阵,建立了基于最小二乘支持向量机与最小均方的小波系数预测方法.最后,根据预测小波系数,进一步提出了基于小波系数逆变换的视频流量长时预测方法.仿真结果验证了此算法的有效性.     

基于三维虚拟VR技术的景观规划系统设计

为了获取生动、可视化的景观规划方案,设计基于三维虚拟VR技术的景观规划系统。主要从三维景观建模与虚拟VR技术两方面展开虚拟景观规划,构建景观三维模型时,利用点云数据在3ds MAX中构建三维建筑、道路模型,通过缩放、修改模型方式优化虚拟景观场景;设计VR虚拟景观仿真支撑平台时,在VR场景编辑模块中编辑景观虚拟场景,仿真核心工作模块负责地形、流体、阳光雨雪模拟特效,最后采用建模及输出模块输出虚拟景观规划结果。由仿真实验结果得出,该系统可根据地形坡度规划合理的景观数量,处理三维点云数据准确率高达99%,是一种满意度较高的景观规划系统。     

一种360°全景视频自适应FEC编码算法研究

针对全景视频数据因量大和延时敏感的特点造成的视频失真问题,提出一种360°全景视频自适应前向纠错（Forward Error Correction,FEC）编码算法,根据实时网络状况对全景视频的图块进行编码比特率和FEC编码率的优化匹配,将全景视频传输质量最大化,减少视频失真。实验结果证明,与传统视频传输算法相比,该算法可以减少视频失真,且视频峰值信噪比（Peak Signal to Noise Ratio,PSNR）提高5～7 dB。     

基于功率分割能量收集的全双工中继网络的能效优化

针对全双工放大转发中继网络的能效提高问题，提出了一种基于功率分割能量收集的全双工中继网络的能效优化方法。该全双工中继网络的中继节点采用功率分割方式进行非线性能量收集，在非完美信道下，将非凸的能效问题转化为最小能量消耗问题，进一步转化为优化发射功率和传输时间两个子问题。根据信道容量得到最优传输速率，通过vpasolve函数求出最优传输速率和功率分割因子，再利用香农公式求最优传输时间，最终得到能效的最优解。仿真表明，所提方法的能效比仅优化传输速率和传输时间的能效分别提升约13.07%、8.48%，比单向全双工放大转发的能效提升约28.59%。     

基于时空多样性编码的低轮值无线传感器网络可靠传输算法

提出了适用于低轮值无线传感器网络的可靠传输算法,主要特点是发掘并利用低轮值无线传感器网络特有的时空相关性,结合编码机制以获得较高的能量效率和较低的传输时延。针对编码块在多条路径上的最优分配问题进行了建模。由于求解最优策略是NP难题,给出了近似算法,并通过仿真分析了不同参数对近似算法的影响。仿真结果表明,基于时空多样性编码的分配算法能够在较低的能量开销条件下,实现低时延的可靠传输。     

基于5G的VR融合制作关键技术设计与实现

VR节目制作与传统电视制作存在一定不同,这些差别不但体现在拍摄、制作手法等艺术层面,对技术系统架构也有着不同的要求.例如,从视频幅型上来说,传统视频采用的是16:9或4:3的平面视频方式,而VR视频采用的是360°全景视频,因此,VR视频的全流程采集制作对技术系统的整体链路提出了一定要求.本文主要针对VR节目直播与制作...     

一种5G网络切片的编排算法

网络切片是基于SDN/NFV的5G网络架构实现按需组网的一种重要技术.通过分析5G主要场景,提出了SDN/NFV架构下一种基于GA-PSO优化的网络切片编排算法.该算法利用粒子群算法能够快速收敛于全局最优解的特性,设计网络切片性能的评价函数.并且利用遗传算法快速随机搜索的能力,实现对网络切片的更新和优化,利用粒子群追逐局部最优解与全局最优解得到最优网络切片.仿真实验结果表明,该算法能够实现对多业务场景网络切片的个性化创建,充分发挥SDN的集中控制方式的优点,在降低网络能耗的同时,提高网络资源利用率.     

基于强化学习的立体全景视频自适应流

针对当前立体全景视频传输缺少有效的流自适应方法,且传统全景视频流自适应策略传输双目立体全景视频使得传输数据加倍,所需带宽巨大的问题,该文提出一种基于多智能体强化学习的立体全景视频非对称传输自适应流方法,以实时应对网络带宽波动。首先,根据人眼对视频显著性区域的偏爱,左右视点中每个瓦片(tile)对立体视频的感知质量的贡献度不同,提出一个基于tiles的左右视点观看概率预测方法。其次,设计了一种基于策略-评价(Actor-Critic)的多智能体强化学习框架,对左右视点进行联合码率控制。最后,根据模型结构和双目抑制原理,设计合理的奖励函数。实验结果表明,与传统流自适应传输策略相比,该文所提方法更加适用于基于tiles的立体全景视频传输,实现在有限带宽下提高用户的体验质量(QoE),为立体全景视频联合码率控制提供了一种全新的方法和思路。     

全景视频QoE评价研究进展

随着5G移动通信技术、高性能计算、传感技术的不断进步,全景视频受到了越来越多的关注。全景视频通过头戴显示设备,可以为用户提供远超于平面视频的逼真的立体视觉感知,具有良好的发展前景。为用户提供良好的体验质量(Quality of Experience,QoE)是视频服务提供商吸引和留住用户,在激烈的市场竞争中取得成功的关键。与平面视频相比,全景视频的数据量倍增,对视频数据的采集、编码、传输和存储均提出了更高的要求。因此,如何在网络传输带宽、存储资源有限的情况下,保证用户的QoE就成为工业界和学术界共同关注的研究热点问题。本文对全景视频QoE评价进行了综述,首先对全景视频在采集、拼接、投影、编码、传输、解码、反投影、渲染等各个环节可能存在的失真进行分析,总结归纳了用户QoE的各种影响因素,如人的因素、系统因素、情境上下文和视频内容特性等;在此基础上,从影响因素和建模方法等多个方面归纳了全景视频QoE评价模型的研究进展,及其在码率自适应、资源优化分配和码率控制等方面的应用情况;最后,介绍了具有代表性的全景视频QoE评价数据集以及常见的QoE模型性能评价准则,并探讨了QoE评价模型目前存在的问...     

H.264帧间模式选择新算法

对H.264编码中的视频序列连续帧的时间相关性和相邻宏块的空间相关性进行统计、分析,提出一种基于时空相关性的帧间模式快速选择算法.仿真实验结果表明提出的模式快速选择算法可在保证视频编码质量同时,很大程度上降低编码器的计算复杂度,平均节省编码时间约65%,平均信噪比下降约0.31 dB.     

5G+VR融合制播技术应用

本文详细介绍了中央广播电视总台5G+VR融合制播系统面向虚拟现实视频生产的创新应用场景,并结合2017-2021年总台春节联欢晚会VR节目制作形态,从技术角度着重分析了该系统的设计开发和融合制播实践情况.具体内容涵盖VR视频采集传输、多机位切换、实时全景在线包装、VR网络交互制作模式(VNIS)、沉浸式三维声制作、新媒...     

基于排队论的路由选择策略研究

针对局域网路由器配置的实际问题,利用排队论相关知识,比较不同方案下的信息传输的平均时间,优化路由设计。将信息传输过程中的路由器分别建模为开的Jackson网络、串联排队网络和取消中间路由的排队网络,比较三种传输网络方式下的信息传输时间,得到最佳的路由选择方案。利用matlab通过蒙特卡洛对传输过程进行仿真,仿真结果验证了理论分析的正确性。     

谐振式无线输电系统线圈参数优化

为优化同轴同心型无线电能传输系统的线圈尺寸，提高最大传输效率，文中基于等效电路理论建模，通过电感、互感表达式推导耦合系数、最大传输效率关于线圈尺寸参数的关系式，运用仿真分析线圈长度、线圈直径和传输距离对耦合系数的影响规律，进一步优化传输系统的最大传输效率，并通过多物理场仿真不同线圈尺寸的磁场分布特征。最后选定线圈尺寸进行实验测试，并与理论、仿真数据进行对比。结果表明，所提方法的最大传输效率的理论值、仿真值与实测值基本吻合。     

认知无线电网络中最优分组长度设计

为满足不同种类多媒体应用的服务质量需求,研究了一个多等级多信道认知无线电网络中的资源分配问题。根据时延和吞吐量为该网络模型定义一个效用函数并最大化这个效用函数的期望值。首先用不考虑传输功率分配的"浪费功率的方式"设计分组长度。然后在选择分组长度时考虑传输功率分配提出一种基于贪婪算法的改进方式,得到了最优分组长度和相应的传输功率。MATLAB的仿真结果表明,在传输功率受限下,当达到相同效用值时,改进方式和"浪费功率的方式"相比能减小传输功率,并取得更加合理的分组长度,而且能更好地满足带宽需求,这是由于改进方式不仅考虑了各个信道上数据包的到达时间间隔,还考虑了信道增益。