面向多模态自监督特征融合的音视频对抗对比学习

目的 同一视频中的视觉与听觉是两个共生模态,二者相辅相成,同时发生,从而形成一种自监督模式。随着对比学习在视觉领域取得很好的效果,将对比学习这一自监督表示学习范式应用于音视频多模态领域引起了研究人员的极大兴趣。本文专注于构建一个高效的音视频负样本空间,提高对比学习的音视频特征融合能力。方法 提出了面向多模态自监督特征融合的音视频对抗对比学习方法：1)创新性地引入了视觉、听觉对抗性负样本集合来构建音视频负样本空间;2)在模态间与模态内进行对抗对比学习,使得音视频负样本空间中的视觉和听觉对抗性负样本可以不断跟踪难以区分的视听觉样本,有效地促进了音视频自监督特征融合。在上述两点基础上,进一步简化了音视频对抗对比学习框架。结果 本文方法在Kinetics-400数据集的子集上进行训练,得到音视频特征。这一音视频特征用于指导动作识别和音频分类任务,取得了很好的效果。具体来说,在动作识别数据集UCF-101和HMDB-51(human metabolome database)上,本文方法相较于Cross-AVID(cross-audio visual instance discrimination...     

钢板桩在某电力隧道工程中的应用

结合某电力隧道工程实例,介绍了应用钢板桩作为管沟土方开挖支护方案的计算、施工及变形观测的过程,指出在地下管线及邻近密集建筑群中进行深基坑开挖时,采用内支撑钢板桩支护是一种有效的方法.     

新菜新香飘

金牌百花鲍；岭南飘香鱼；金丝香蕉球；仿古年菜；生炊猪润；秘制羊排；     

群英荟萃

鲍酱扒梅花参；鲜酱汁[火局]八爪鱼；咸蛋泰米黑椒鸡；琥珀玉米鸡；双萝滋补鹿肉。