有效

一种基于多层级编码-解码器的视频描述方法及系统

郑慧诚、余明静、王腾、刘泽华
广州力仁数字科技有限公司

摘要

本发明公开了一种基于多层级编码‑解码器的视频描述方法及系统,该方法包括:获取视频并基于多层级编码器进行编码处理,构建目标图和事件图;基于多层级解码器对目标图和事件图进行解码,得到句子序列和单词序列,基于多任务学习完成文本描述任务和句子标签预测任务。该系统包括:编码模块和解码模块。本发明基于多层级编码器和多层级解码器,能够挖掘语句中细粒度的关系并提升描述性能。本发明作为一种基于多层级编码‑解码器的视频描述方法及系统,可广泛应用于视频处理领域。

暂无引用专利