多媒体会议中的快速实时自适应混音方案研究

多媒体会议中多点控制单元(multi-point controlling unit,简称MCU)在多点会议中提供音频、视频和数据等的集中处理能力,其中音频处理能力是最基本的,也是实时性要求最高的要素.针对多点多媒体会议的实际应用需求,归类并分析了多种自适应多点语音混合处理方案,提出了采用自对齐加权的高性能混音方案.该方案不使用在实时多媒体处理中广泛运用的饱和运算,所以不引入新的噪声,因而具有较低的算法复杂度,其混合处理结果具有良好的听觉主观舒适感.同时,这套方案具有较好的并行处理特性,使用DSP等硬件较易实现,可以广泛应用在多媒体会议系统的实现中.     

H.323多点处理器任务调度策略

ＩＴＵ－ＴＨ．３２３协议规定了基于包交换网络上的多媒体通信系统标准。其中的多点控制单元（ＭＣＵ）可以在多点会议中提供多终端的通信能力,多点处理器（ＭＰ）在多点控制器（ＭＣ）的控制下实现音频、视频、交换混合和媒体流的其它处理。该文针对多点会议的需求,研制出一种基于多ＤＳＰ的音频多点处理器,通过数片ＤＳＰ的协同工作,完成高复杂度的多通道Ｇ．７２３．１的编解码运算,以便实现支持多路远程低速终端接入的电视会议系统,是一个具有很高性价比的解决方案。     

SMSC推出完整的三频数字无线音频处理器

智能型混合信号连接解决方案(Smart Mixed-Signal Connectivity)厂商SMSC今天发表新款DARR83芯片,这是业界最完整的数字无线音频处理器,可支持3种频段并带一个嵌入式多信道USB 2.0音频控制器,可适用于各种不同的数字无线音频应用。     

SMSC推出业界完整的带嵌入式多信道USB 2.0音频控制器的三频数字无线音频处理器

智能型混合信号连接解决方案(Smart Mixed-Signal ConnectivityTM)领导厂商SMSC近日发表新款DARR83芯片,这是业界最完整的数字无线音频处理器,支持三种频段并带一个嵌入式多信道USB2.0音频控制器,适用于各种不同的数字无线音频应用。     

基于嵌入式Linux的数字音频延时系统设计

针对传统音频延时系统实现方案的不足,提出了基于EP9302(ARM920T)处理器和嵌入式Linux操作系统的数字音频延时系统的实现方案.分析了系统硬件结构,着重介绍了数据存储模块和基于IIS音频总线标准的音频信号预处理模块的具体实现.介绍了以Linux操作系统为核心的多层软件构架,详细分析了音频设备驱动程序的实现机制.测试结果表明,该设计方案具有较高的延时精度,系统在稳定性、可扩展性和可移植性方面表现出色.     

一种新的多媒体会议实时混音方案

多媒体会议中多点控制单元(multi-point controlling unit,简称MCU)在多点会议中提供音频、视频和数据等的集中处理能力,其中音频处理能力是最基本的,也是实时性要求最高的要素.针对多点多媒体会议的实际应用需求,归类并分析了多种自适应多点语音混合处理方案,提出了采用自动门限和通道压缩处理的高性能混音方案.该方案主要针对人耳听觉的特点,首先去除掉会议中人耳无法分辨的通道,提高混音信噪比;然后对剩下的通道进行语音能量压缩,在保证混音结果不溢出的同时使得输出的语音能量比较稳定,具有良好的听觉主观舒适感.同时,这套方案具有较低的算法复杂度,使用DSP等硬件较易实现,可以广泛应用在多媒体会议系统的实现中.     

SMSC推出带嵌入式多信道USB2.0音频控制器的三频数字无线音频处理器

<正>智能型混合信号连接解决方案(Smart Mixed-Signal ConnectivityTM)领导厂商SMSC于2011年1月11日发表新款DARR83芯片,这是业界最完整的数字无线音频处理器,可支持三种频段并带一个嵌入式多信道USB 2.0音频控制器,可适用于各种不同的数字无线音频应用。     

基于H.323的MCU多点会议系统①

简单介绍了三种多点会议模式,并对多点控制器和多点处理器的设计方法进行了分析。对于混音过程中音频数据溢出的问题,简单介绍了几种常用的溢出算法以及它们的性能。最后对影响多点会议Qos的因素进行分析,提出了基于终端的Qos策略。     

混合粒子群算法的异构多核处理器间任务调度

针对异构多核处理器间的任务调度问题,为了更好地发挥异构多核处理器间的平台优势,提出一种基于将有关联的且不在同一处理器上的任务进行复制的思想,从而使每个异构多核的处理器能独立执行任务,来减少不同处理器之间的通信开销,并且通过混合粒子群算法(HPSO)来调度异构多核处理器中的任务,避免由于当任意一个异构多核处理器由于任务分配过多而导致计算机不能及时且准确地得出结果.最后实验证明,对比传统的启发式分配方案和常见的遗传算法(GA),基于任务复制思想分配方案和混合粒子群算法(HPSO)具有更好的求解能力,并且可以提供执行时间更少的调度分配方案,具有较好的应用价值.     

一种面向多点交互的自适应音频混合方法

现有的全分布式混合通信模型和集中混合通信模型在网络带宽动态变化时很难满足多点交互的声音质量和可扩展性。鉴于此,论文提出了一种分层通信模型和基于此模型的自适应音频混合方法。这种音频混合方法根据当前网络可用带宽以及应用程序的QOS要求,自适应调整音频混合的程度。该方法已经在同步实时教学系统中得到了应用。相关数据表明,在IP网上,自适应音频混合方法可以有效地提高多点交互的声音质量和可扩展性。     

基于DirectSound技术的音频捕获与多路混音的实现

给出了一个如何使用DirectSound技术实现音频流的捕获并实现网络上多路声音混合的方案.该方案通过DirectSound提供的缓冲机制实现了音频流的捕获,结合网络技术和辅助缓冲技术可实现网络上多路声音的混合,提高了音频处理的效率和通用性.阐述了DirectSound的相关技术,给出了系统的框架图及音频捕获与混音的实现方法,提出了环形缓冲区设计方案,最后给出了系统优化方案.     

基于音频编解码器TLV320AIC23与FPGA/CPLD的数字化语音处理系统

提供了基于FPGA/CPLD的数字化音频处理系统的典型解决方案。该方案由语音芯片(TLV320AIC23)和处理器(FPGA/CPLD)两部分组成。语音芯片完成模拟语音信号与数字信号之间的相互转换,包括ADC和DAC;处理器则完成对经模数转换后的语音信号在数字域处理的过程。该方案可以充分发挥FPGA/CPLD所具有的灵活性好、实时性能高及并行处理能力强的特点。     

Marantz公司推出新款音频/视频接收机

Marantz公司推出其最新的旗舰消费音频/视频接收机(AVR),采用了Cirrus Logic公司领先的音频数字信号处理器(DSP)CS49520。Marantz SR9600是一款高质量多轨AVR,它将高档消费接收机市场的音频保真度和安装灵活性提高到一个新的高度。Cirrus Logic的双核32位数字信号处理器CS49520     

基于DSP的广播节目自动识别系统的实现

本系统针对广播节目信号传输时易受干扰的问题,采用相关系数算法判别广播音频信号的相似性,实现在高速数字信号处理器(DSPs)芯片上对输入的多路节目信号进行自动识别,并分析其实现原理。实验结果表明了系统的正确性和合理性。     

欧胜推出业界首款四核高清音频处理器SoC

<正>欧胜微电子有限公司日前宣布推出产品编号为WM5110的业界首款四核高清晰度(HD)音频处理器系统级芯片(SoC)。此款高集成度、低功耗HD音频处理器带有先进的DSP功能设置,被设计用于为智能手机、平板电脑以及便     

多核多线程处理器二级Cache预取结构的设计

合理的设计二级Cache是有效地减少多核多线程处理器存储器访问延迟的方法。针对现有的多核多线程处理器,讨论了二级Cache的混合预取结构设计方案。通过详细设计和仿真分析,结果表明混合预取结构可有效提高处理器的整体性能。特别是采用不命中混合预取结构的二级Cache性能更佳,适合满足此类结构的多核多线程处理器需求。     

TMS320C6713与TLV320AIC23B的接口设计及实现

根据TI公司的IMS320C6713多通道缓冲串口(McBSP)和音频解码芯片AIC23B的工作原理,设计了音频解码电路.将TMS320C6713多通道缓冲串口直接与AIC23B相连,其优点是操作简单,不占用处理器的总线,不影响其他功能模块的性能.给出了TMS320C6713和AIC23B的接口电路和软件编程实现.     

视频会议中的排队论问题的计算机模拟

1 语音混合简介视频会议系统中,多路语音混合分为5个阶段:1)多个终端通过IP网络向完成混合功能的服务器发送多媒体数据。由于是会议信息,其中包含语音、视频及控制、数据信息等。其中,音频和视频信息采用UDP作为传输协议,通过RTP将数据传送出去。而数据和控制信息则采用TCP作为传输协议。此时,多点信息是同时并行向混合端发送。2)服务器串行接收来自各用户的数据流,经解码后发往混合模块。3)混合模块串     

TKScope嵌入式仿真开发平台讲座(37) TKScope最新组件支持Cortex-M4内核的仿真和编程

Cortex-M4处理器是由ARM专门开发的最新嵌入式处理器,用以满足需要有效且易于使用的控制和信号处理功能混合的数字信号控制市场。高效的信号处理功能与Cortex-M处理器系列的低能耗、低成本和易于使用的优点的组合,旨在满足专门面向电动机控制、汽车、电源管理、嵌入式音频和工业自动化市场的灵活解决方案。     

基于CUDA的多信道锋电位实时分类方法

为提高多信道神经元锋电位分类任务的计算效率,满足其在实时场景下的应用需求,提出基于统一计算设备架构(compute unified device architecture,CUDA)的掩蔽高斯混合模型的并行化实现和优化方案。利用高维锋电位数据的稀疏特性和高斯混合模型的强抗干扰性以及良好并行性,借助GPU图形处理器,对特征掩蔽高斯混合模型(Masked Gaussian mixture model,Masked GMM)进行并行实现,进行针对性优化。实验结果表明,在32信道的锋电位数据集上,与原有的CPU串行实现相比,该方案分类速度提高了170倍左右,达到了实时计算,为高维信道锋电位实时分类提供了可行的解决方案。