|
|||||
|
|
| 基于用户关注空间与注意力分析的视频精彩摘要与排序 | |
| 引用本文： | 黄庆明,郑轶佳,蒋树强,高文.基于用户关注空间与注意力分析的视频精彩摘要与排序[J].计算机学报,2008,31(9). |
| 作者姓名： | 黄庆明 郑轶佳 蒋树强 高文 |
| 作者单位： | 1. 中国科学院研究生院北京100190;中国科学院计算技术研究所,北京,100190 2. 中国科学院研究生院北京100190 3. 中国科学院计算技术研究所,北京,100190;中国科学院智能信息处理重点实验室,北京,100190 4. 北京大学信息科学与技术学院,北京,100871 |
| 基金项目： | 国家高技术研究发展计划(863计划)，国家自然科学基金 |
| 摘 要： | 文中提出一种基于用户关注空间与注意力分析的视频内容理解方法,该方法可以有效地获得多通道的视频关注信息,并可使用户根据个性化需求定制视频关注内容,实现视频的高效浏览与访问.首先采用基于二叉层次型结构与分类器选择的音频分类算法将视频中的主要声音类型分类,然后将视频中影响用户注意力的视觉、听觉、时序因素定义为用户关注空间,分别使用相应的中层特征在这三个方面对用户注意力进行表示并计算其关注度,从而在音视频底层特征与高层认知之间建立有机过渡.作者设计了顺序决策融合算法来融合视觉与听觉关注度,生成关注度时序变化曲线并获得精彩摘要.最后使用支持向量回归模型并引入相关反馈机制来实现用户个性化的精彩片段排序.该项工作的特点是通过建立符合人类认知规律的关注度模型并结合相关反馈技术,对视频内容进行类人理解.实验证明,该方法对提取与生成符合用户个性化要求的视频摘要及排序结果具有良好的效果. |
| 关 键 词： | 用户关注空间 注意力分析 关注模型 音视频摘要 精彩排序 |
User Attention Analysis Based Video Summarization and Highlight Ranking |
|
| HUANG Qing-Ming,ZHENG Yi-Jia,JIANG Shu-Qiang,GAO Wen.User Attention Analysis Based Video Summarization and Highlight Ranking[J].Chinese Journal of Computers,2008,31(9). | |
| Authors: | HUANG Qing-Ming ZHENG Yi-Jia JIANG Shu-Qiang GAO Wen |
| Affiliation: | HUANG Qing-Ming1),2) ZHENG Yi-Jia1) JIANG Shu-Qiang2),3) GAO Wen4)1) |
| Abstract: | |
| Keywords: | user attention space attention analysis attention model audio-video summarization highlight ranking |
| 本文献已被 CNKI 维普 万方数据 等数据库收录！ | |