有效

一种用于高效视频目标分割的时空并行稀疏记忆网络

郑慧诚、党吉圣
中山大学

摘要

本发明提供一种用于高效视频目标分割的时空并行稀疏记忆网络,包括时空并行记忆构建组件和并行稀疏记忆读取器;时空并行记忆构建组件从过去的多个历史帧中同时挖掘时间和空间记忆值,全面捕获具有区分性的视频目标信息,各个记忆帧的时间和空间映射沿时间维度堆叠形成时间记忆库和空间记忆库;并行稀疏记忆读取器用于从时间记忆库和空间记忆库中均匀并行采样稀疏的记忆帧。本发明能够准确且高效地对视频目标进行分割;可以增强聚焦动态区域的能力,从而提高分割精度并限制运动物体与静态背景的分割范围;通过聚合空间上下文信息,将单帧感受野扩大到多帧感受野;通过均匀采样可以直接有效地减少帧级别的记忆冗余,从而实现加速,且不影响性能。