有效

多尺度时空建模视频摘要生成方法及装置

刘天瑞、丁亚淼、黄俊杰、陆治州、赵文涛、卜立武、刘新旺
中国人民解放军国防科技大学

摘要

本发明提供的多尺度时空建模视频摘要生成方法及装置,包括特征提取模块、多尺度时空建模模块、重要性分类器、摘要生成模块;所述多尺度时空建模模块包括顺序自由排列的多尺度聚合器、级联时间建模模块和并行空间建模模块。本发明通过构建包括多尺度聚合器、级联时间建模模块和并行空间建模模块的多尺度时空建模模块,全面捕捉视频的局部细节和全局结构;且多尺度聚合器、级联时间建模模块和并行空间建模模块的顺序可自由排列,使得模型对不同视频特征的适应性得到了提高,使模型在保持高性能的同时,具有较低的计算复杂度。本发明具有成本低、结构简单、性能好、适应性强的优点。