| 基于差分注意力的时空小波分析视频预测算法 |
| |
| 引用本文： | 金贝贝,胡瑜.基于差分注意力的时空小波分析视频预测算法[J].计算机辅助设计与图形学学报,2022,34(2):180-188. |
| |
| 作者姓名： | 金贝贝 胡瑜 |
| |
| 作者单位： | 中国科学院计算技术研究所智能计算机研究中心 北京 100190;中国科学院大学 北京 100149 |
| |
| 基金项目： | 国家重点研发计划科技创新2030——“新一代人工智能”重大项目(2018AAA0102701);空间智能控制技术实验室开放基金(HTKJ2019KL502003). |
| |
| 摘 要： | 针对视频预测中空间结构信息细节和时序运动依赖关系难以准确预测的问题,受人类视觉过程的启发,提出一种基于差分注意力机制的时空小波分析视频预测算法.首先利用时空小波分析模块对视频内容进行多频分解,增强模型对于高频细节信息以及过程性运动的理解能力;然后利用差分注意力机制指导模型更高效、合理地分配注意力资源,提升对瞬时运动特征的表达能力.在KTH, Cityscapes, BAIR, KITTI, Caltech Pedestrian数据集上的实验结果表明,所提算法在PSNR, SSIM, LPIPS评价指标上取得了比已有算法更优异的效果;同时,可视化的对比也表明所提算法的预测结果更加清晰.
|
| 关 键 词： | 视频预测 时序小波变换 注意力机制 空间小波分析 |
Spatial-Temporal Wavelet Analysis Video Prediction Based on Differential Attention Mechanism |
| |
| Jin Beibei,Hu Yu.Spatial-Temporal Wavelet Analysis Video Prediction Based on Differential Attention Mechanism[J].Journal of Computer-Aided Design & Computer Graphics,2022,34(2):180-188. |
| |
| Authors: | Jin Beibei Hu Yu |
| |
| Affiliation: | (Research Center for Intelligent Computing Systems,Institute of Computing Technology,Chinese Academy of Sciences,Beijing 100190;University of Chinese Academy of Sciences,Beijing 100149) |
| |
| Abstract: | |
| |
| Keywords: | video prediction temporal wavelet analysis attention mechanism spatial wavelet analysis |
| 本文献已被 维普 万方数据 等数据库收录！ |
|
