音视频同步技术综述

介绍了多媒体数据的构成、多媒体同步的分类和多媒体同步的定义,在此基础上介绍了多媒体中音视频同步的相关技术,并对不同技术的优缺点进行了阐述.最后,介绍了目前较为流行的音频嵌入视频技术的应用.     

动态网络环境下的音视频同步技术

针对网络传输中由于延迟、抖动、网络传输条件变化等因素引起的音视频不同步的问题,设计并实现了一种适应不同网络条件的音视频同步方案．利用音视频编码技术AMR-WB和H．264具有在复杂网络环境中速率可选择的特性,结合RTP时间戳和RTCP反馈检测QOS,通过控制音视频编码方式,实现了动态网络环境下的音视频同步方案．重点介绍了可靠网络环境和动态网络环境下同步算法的设计过程,并通过实际测试验证了此方案的可行性．结果表明,此方案能够保证不同网络环境中的音视频同步．     

IP视频会议系统音视频同步的研究

为了顺应时代的发展步伐,提高工作效率,IP视频会议系统已经逐步应用于我们的工作和生活当中,但是其音视频同步问题一直是研究的焦点。本文先简要介绍了IP视频会议系统的结构和特点,然后论述了其音视频不同步的原因,最后阐述音视频同步的解决方案,以使IP视频会议系统更好地为人们服务。     

音视频回放同步误差产生原理及指标分析

音视频回放同步误差普遍存在于分立式音视频记录系统.本文对记录设备音视频回放同步误差的产生原理进行了分析.并时范围指标的选择进行了说明.希望通过本文的阅读,能为相关音视频记录设备开发者以及技术人员解决同步误差问题提供帮助.     

嵌入式RMVB播放器音视频同步及其实现

随着计算机多媒体技术和嵌入式技术的发展,便携的嵌入式播放器也日渐流行。由于嵌入式设备资源有限,因此如何在有限的资源下实现多媒体音视频的同步是一个重要的讨论问题。目前关于多媒体格式音视频同步的研究都很多,但是关于RMVB格式在嵌入式设备上音视频同步的研究还很少,本文主要介绍了缓冲区和时间戳结合的音视频同步方案,在设计的嵌入式RMVB播放器中验证,该播放器可以达到流畅播放的效果。     

一种优化的手机直播系统中音视频同步方法

FFmpeg是一个开源跨平台多媒体数据解决方案,由于手机直播系统在移动通信网络中传输多媒体数据的过程中时常会出现音视频不同步,通过研究基于时间戳的多媒体音视频同步算法模型,将其引入到ffmpeg中,并在android平台进行算法实验,实验证明,基于时间戳多媒体音视频同步算法模型能够有效保证多媒体数据的同步。     

Linux下的声卡编程及一种实用的音视频同步方法

介绍了Linux操作系统下的声卡编程方法，给出了声音采集及回放的实现流程图及关键代码，并提出了一种实用的音视频同步方法。     

基于可变码长的音视频同步编码改进算法

针对音视频同步的问题提出一种基于H.264帧间预测的音视频同步编码的改进算法。该算法引入可变码长的概念,将音频编码数据分为若干码组,每个码组为2或3比特的待嵌入数据。在H.264的帧间预测环节,可变尺寸块与码组之间根据公式确定映射关系。根据待嵌入数据来动态决定宏块分割模式的编码方式,以及根据映射关系提取数据的解码方法,使用4×4宏块分割模式表示嵌入数据的结束。实验结果表明,该算法使视频采集样本的峰值信噪比(PSNR)下降了0.031dB,码率变化率为5.16%,产生1.97%的嵌入开销,但是所嵌入的音频编码数据可以正确完整地提取。因此该算法能够在增加数据嵌入容量、保持视频质量、保证数据正确性和完整性的基础上实现音视频同步编码。     

基于RTP／RTCP的音视频同步方法研究

分析音频和视频同步的标准以及造成音视频不同步的原因,提出一种基于RTP／RTCP协议的音视频同步控制方法。以音频为主媒体,视频为从媒体,在接收端通过设置缓冲区实现音频流的媒体内同步,通过比较音视频数据包的时间戳判断同步关系,对视频采取重复或丢弃的方法实现音视频同步控制。在实验环境下模拟音视频流经网络传输后在接收端经过同步控制后播放和直接播放两种情况,表明,提出的同步方法能很好的纠正音视频不同步的现象。     

基于MPC的音视频同步码率自适应测试

随着信息化的发展,音视频流媒体技术应用面越来越广,为了使得音视频流媒体技术尤其是在直播方面拥有更好的性能,得到更多用户的好评,采用在原本HTTP的动态自适应流标准的视频流媒体架构下引入MPC控制算法并将MPC模型预测控制与码率自适应算法相结合的方法,进行对AAC优化、确定预测模型、测试音视频同步的影响因素以及PSNR-Y分量、测试切片时长与跳帧时延,计算最终的QoE用户评价指标来进一步检测音视频流媒体技术的优劣。经实验仿真测试可知,相比前人的相关算法,在不同直播场景下以及不同网络环境下均有更加良好的QoE值,平均QoE用户评价指标明显更高,为1237.2826。综上分析可知,MPC的音视频同步码率自适应算法各项性能最好。     

一种适用于嵌入式媒体播放器的音视频同步方法

目前已存在几种嵌入式媒体播放器,但是由于环境的特殊性,播放时常常会出现音视频不同步的现象。给出了一种适用于嵌入式媒体播放器的音视频同步方法,并在自主开发的以嵌入式Linux和图形用户界面Qt为软件平台的媒体播放器上进行了验证。     

IP视频会议系统中音视频同步的研究

在IP视频会议系统中，音频流需要保持其连续性(媒体内同步)，而视频流的变化应与音频信息保持一致(媒体间同步)。由于网络状态的变化给传输带来延迟抖动，因此接收方要如实地播放，就必须进行同步控制，以恢复数据之间的时间关系。为此探讨了在MCU集中管理模式下的视频会议系统中，音视频同步控制的问题，并结合RTP／RTCP协议给出具体可行的解决方案。     

矢量信号的同步检波技术

文中介绍了矢量信号的同步检波技术,重点分析和描述了基于DSP和FPGA的数字同步检波方法,为模拟电路数字化进行了大胆的尝试,并给出了试验仿真结果,证明基于DSP和FPGA的数字同步检波技术能够满足高性能矢量信号分析的要求.     

卫星移动通信信号处理同步技术研究

卫星移动通信信号处理同步技术很大程度上决定了通信的质量。针对卫星移动通信系统中突发信号符号长度短、独特码少的特点,对传统的基于最大似然准则线性相位内插相位估计算法和二次插值快速傅立叶变换频偏估计算法进行了研究,进行了线性相位内插算法和二次插值快速傅立叶变换频偏估计算法机理分析;根据噪声平均化原则,提出了一种低导频段数据情况下改进的线性相位内插算法;利用数据段信息和导频段信息整体做频偏估计的方法,提高了导频段个数较少情况下的频偏估计精度;仿真与试验结果表明：改进的线性相位内插算法比传统算法相位同步性能更高,利用整帧数据做频偏估计精度更高,并满足卫星移动通信终端信号处理的要求。     

让字幕与音视频同步

CFan第6期《不怕听力差老外说话能"看"懂》一文中,提到如何将国外无字幕视频通过电脑自带的软件录制音频,并通过国外音频转化网站转成文本。思路确实不错,但实践中有诸多的难点,比如,识别出的文本与视频是不同步的,这会造成理解上的困难,而且也无法在手机、平板上使用。     

多路音视频文件的存储与回放

提出了一种实现多路音视频文件的存储和回放的方法。该方法可将多路音频和视频存储到同一文件中并同步回放，具有成本低、存储简单、易于控制、可扩展性强的特点，可用于视频会议、实时教学等多个方面。     

面向编钟乐舞的音视频同步技术的研究

音视频同步作为连接音乐,动作的纽带在面向编钟乐舞的音乐驱动动作编辑流程中起到关键性的作用,通过从音频解析入手,提出了音频乐段与动作序列的对应关系,讨论了音频流与视频流如何在实时的环境中同步展示,并给出了音频,视频同步模型的具体实现方法。     

同步地址信号发生器的设计实现

本文论述的是在实际系统设计中常遇到的地址信号发生器的设计实现,文中给出了一种巧妙地使用常用的GAL芯片来设计同步性能好、实现简便的同步地址信号发生器的设计思路和实现方案,并给出了一个可外部选择地址信号发生速率、多段地址空间寻址的同步地址信号发生器实例。     

UWB信号快速同步算法研究

本文采用发射训练比特的方法,通过合理的数学建模.在接收端利用最小二乘估计的方法采实现超宽带信号同步.给出了详细的理论推导和MATLAB仿真结果.其同步性能由估计结果的MSE和最终的捕获概率来进行评估,仿真结果表明这种方法对于定时精度没有苛刻的要求,且利用很少比特的训练序列就可以达到相当好的同步性能.