基于FFMPEG解码的音视频同步实现

为实现音视频同步播放,针对音视频数据同时被采集,但编码和存储独立的情况,提出了将音频播放时钟作为同步时钟,采用时间戳技术实现历史音视频同步播放.该方法使用FFMPEG对历史音视频文件分别进行解码,将解码后计算得到的音频播放时钟作为同步时钟,控制视频播放速度同步到音频播放时钟上,保证了音视频数据流畅播放,同步无滞后,无延迟.通过实验设计,验证了提出的基于音频播放时钟的时间戳同步方法是有效的.     

音视频流实时分离及同步播放系统设计与实现

通过音频与视频解码器和相关的音视频流方案实现上位机与下位机音视频流数据的编码解码及重新合成,并给出了音视频在播放过程中实现同步校正的方法,实现了在有高音质外放设备情况下的上下位机播放的准确同步。系统在Android平台上已获得实现,所使用的音视频实时分离及同步播放方法能成功实现智能终端视频播放和高音质外放音频播放的准确同步,并在上位机成功合成新的音视频文件。     

基于AVS的嵌入式音视频同步方法

音视频同步是数字电视广播和多媒体通信等应用的关键技术。该文提出一种基于AVS并结合嵌入技术的音视频同步方法。将压缩音频数据嵌入AVS视频编码系统,保证传输或存储、接收端解码与播放过程中的音视频始终同步。实验结果表明,该方法实现了音视频完全同步,能减小用于同步的开销。     

多视点立体音视频压缩编解码同步研究

为了更好地解决多视点立体视频数据的音视频同步问题,提出了一种基于Direct Show的多视点立体音视频信号压缩编解码同步方案。根据多视点立体视频的光栅显示特点,充分利用了立体视频帧内以及帧问的冗余相关性实现了立体视频数据的无损压缩,同时针对音频数据采用了基于子带编码的方式进行压缩,最后将多视点立体视频与音频数据通过压缩编码后写入立体视频文件,并在解码端通过同步控制机制实现了音视频的同步。实验结果表明,此方法能有效地实现多视点立体音视频同步。     

基于Android平台的无线视频监控

随着科技生活的发展,人们对视频监控的要求越来越高.提出了一种基于Android平台的移动音视频监控系统.该系统利用Mediastream2实现流媒体的处理,ORTP实现流媒体的安全可靠传输,以及FFMpeg实现音视频的编解码.重点讲解了音视频库FFMpeg中对视频和音频的编解码处理过程以及是如何将音视频同步输出的.最后在嵌入式平台TQ210上测试可实现实时的视频监控.     

基于GM8126的数字可视对讲系统设计与实现

为了设计高性能数字可视对讲系统,采用GM8126芯片作为主控芯片,利用Android智能手机作为室内机,设计并实现了一款可视对讲系统。采用多线程技术实现音频数据、命令数据的双向传输、视频数据的单向传输,采用H.264格式对视频数据进行硬件编码、软件解码,选用G.711A率标准压缩音频数据,利用RTSP协议实现音视频数据的实时同步传输。测试结果表明,该系统音视频效果良好、运行稳定。     

便携式终端上AVS-TS播放的软件实现

AVS（先进音视频编码标准）是我国自主制定的新一代数字音视频编解码技术标准,包括系统、音频、视频、数字版权管理等。介绍PXA320作为终端硬件平台,在Helix DNA Client播放器框架上设计开发传输流TS（Transport Stream）解复用模块和AVS视频解码模块,实现AVS-TS节目流的嵌入式软件实时播放。实验数据表明本系统可以实现QVGA的AVS-TS节目音视频同步实时播放。     

在接收端实现流媒体同步控制的研究

为了更好的解决音视频同步问题,提出了一种在RTP/RTCP协议的基础上,在接收端实现流媒体同步控制的方法。根据音视频接收端缓冲区的占用率,以音频流为主媒体流,视频流为从媒体流,通过比较音频帧和视频帧的播放时间标签,对视频帧采取重复/丢弃方式来取得音视频媒体间的同步。实验表明,该种方法具有良好的同步性,既能满足P-QoS(可感知服务质量)要求又能满足实时性要求。     

基于AVS的广播式手机电视系统

提出并实现了一种基于AVS的广播式手机电视系统,包括音视频数据的实时编码、系统层复用、T-DMB信号发射与接收、PC及手机平台的解码回放等,重点介绍了音视频编码器中的AVS视频编码算法的优化和复用器的实现,通过实验对编码器的性能进行了测试,对播放端的播放效果进行了分析。实验结果表明,AVS能够很好地应用于手机电视。     

基于可变码长的音视频同步编码改进算法

针对音视频同步的问题提出一种基于H.264帧间预测的音视频同步编码的改进算法。该算法引入可变码长的概念,将音频编码数据分为若干码组,每个码组为2或3比特的待嵌入数据。在H.264的帧间预测环节,可变尺寸块与码组之间根据公式确定映射关系。根据待嵌入数据来动态决定宏块分割模式的编码方式,以及根据映射关系提取数据的解码方法,使用4×4宏块分割模式表示嵌入数据的结束。实验结果表明,该算法使视频采集样本的峰值信噪比(PSNR)下降了0.031dB,码率变化率为5.16%,产生1.97%的嵌入开销,但是所嵌入的音频编码数据可以正确完整地提取。因此该算法能够在增加数据嵌入容量、保持视频质量、保证数据正确性和完整性的基础上实现音视频同步编码。     

嵌入式VOD码流传输同步优化方案

嵌入式视频点播在码流传输时流畅度、同步效果及资源利用率等方面存在冲突。为此,提出一种优化的码流传输同步方案。采用音视频分割同步发送算法,实现码流同步发送,使用音频自适应抖动缓冲算法、视频去抖动算法完成音视频去抖动,并降低丢包率,在解码前进行音视频2次同步,利用基于缓冲区的和式增加积式减少控制算法和实时流传输协议实现网络拥塞控制。测试结果表明,该方案的流内同步时延在100 ms内,流间同步时延在125 ms内,能优化码流流畅度和系统资源利用率。     

$3C6410平台多媒体播放器设计与实现

嵌入式多媒体播放器因其所依赖平台的硬件资源有限,尤其是CPU的工作效率低,造成了视频文件在播放时音视频不同步。实现嵌入式多媒体播放器开发的重点之一,就是要解决音视频同步问题。针对$3C6410平台下AVI格式视频播放分析了关键技术,提出音视频同步方案,实现了针对AVI格式的视频文件播放的多媒体播放器,并且可以在$3C6410平台上运行,得到了预期效果。     

Android下OpenMax IL框架的研究和应用

由于Android系统多媒体引擎使用的是OpenMax软件解码组件,出现了播放分辨率较高视频不流畅的问题。为此,提出在Android系统上设计一OpenMax硬件解码组件,并将其放在嵌入式开发平台上进行测试。该组件是在对Android系统自带Open-Max IL层进行研究的基础上,以SamSung S3C6410为嵌入式核心处理器,针对MPEG-4视频流而设计。实验结果表明,设计的硬件解码组件优于系统自带的软件解码组件,表明该方案切实可行。     

基于RTP／RTCP的音视频同步方法研究

分析音频和视频同步的标准以及造成音视频不同步的原因,提出一种基于RTP／RTCP协议的音视频同步控制方法。以音频为主媒体,视频为从媒体,在接收端通过设置缓冲区实现音频流的媒体内同步,通过比较音视频数据包的时间戳判断同步关系,对视频采取重复或丢弃的方法实现音视频同步控制。在实验环境下模拟音视频流经网络传输后在接收端经过同步控制后播放和直接播放两种情况,表明,提出的同步方法能很好的纠正音视频不同步的现象。     

基于嵌入式音视频采集的视频会议处理系统设计

为提高视频会议召开质量，保证音频与视频的同步，引入嵌入式音视频采集技术，开展对视频会议处理系统的设计研究。确定处理系统的硬件构成包括：音视频服务器、嵌入式处理器、CPU芯片等；在此基础上，基于链路传输压力，通过调整每一条链路上的传输节点，实现音视频数据传输；定义视频会议消息原语，并完成会议图像切换处理。实验结果表明：设计的处理系统应用后，视频会议的音频与视频可以实现完全同步，以此提高视频会议的召开质量，并让视频会议参与用户具有更良好的体验。     

基于DirectShow和RTP的网络视频监控系统

为了解决闯红灯抓拍系统中的视频传输和监控问题,文中设计并实现了一个基于嵌入式DM6446和DirectShow的网络视频监控系统。服务端采集设备基于DM6446获取视频,经过H.264压缩编码、采用RTP对视频帧进行数据打包后经网络发送出去。客户端采用DirectShow技术,实现对RTP数据包的接收和视频帧重组,然后经过复分解滤波器、解码滤波器和渲染滤波器完成实时播放,同时在应用程序中开发源滤波器,简化开发流程和程序的调试,最终结合MFC实现视频监控软件。测试结果表明系统在带宽很低的网络情况下仍具有良好的监控效果和稳定性。     

基于Android系统的FFmpeg多媒体同步传输算法研究

FFmpeg是一个开源跨平台多媒体数据解决方案,常被移植到各种嵌入式系统中。将FFmpeg移植到Android系统中,能够增加Android系统对编解码格式标准的支持,但由于目前手机处理能力低,内存小等硬件配置因素,严重影响FFm-peg对音视频流的解码效率,导致解码出的音视频数据无法同步。通过研究基于时间戳的多媒体音视频同步算法模型,将其引入到FFmpeg中,并在Android平台进行算法实验。实验证明,基于时间戳多媒体音视频同步算法模型能够有效地保证多媒体数据的同步。     

Android平台中轻量级音视频引擎

随着移动互联网络和移动终端设备硬件的快速发展,移动音视频的应用越来越普遍,这要求应用软件能高效的处理音视频文件以满足大众的需求.为提高软件运行效率,通过对多媒体处理流程的分析研究,设计和实现了轻量级的音视频引擎,通过模块化的设计方法,实现了对媒体文件的接收、解析识别文件格式、分离容器中的音频和视频流并分别解码输出,只使用HTTP传输协议和H.265视频解码、AAC音频解码,将软件的体积降到最小,实现与Android平台交互JNI的接口,在应用程序中使用MediaPlayer类实现音视频的播放.     

基于IPv6网络视频的嵌入式系统优化设计

针对进程调度延迟、缓冲控制策略、二维DCT算法等方面存在的问题,基于IPv6网络视频应用提出一种软硬件协同工作的嵌入式系统优化设计方法,该方法实现嵌入式系统的硬件电路、操作系统和网络协议栈。在IPv6网络中进行视频流传输、解码和播放测试,结果表明当空间分辨率为320×240、时间分辨率为25 帧/s时,播放画面流畅、无等待延迟。     

基于ARM的便携式视频解码终端设计与实现

设计便携的嵌入式视频解码终端,从而在ARM9芯片和嵌入式Linux操作系统上实现H．264压缩标准的实时视频接收、解码和播放。介绍系统的研制过程,给出系统构架和实现的关键技术。该系统将先进的视频压缩技术与嵌入式系统相结合,建立了高效的便携式通信平台,有着较大的工程意义和市场价值。