有效

一种基于类脑技术的自然场景下的表情识别方法

李宏菲、臧义华、陈莉莉、李雪扬、凡叔军
中国电子科技集团公司第十五研究所

摘要

本发明提出一种表情特征提取装置,一种基于表情特征提取模型的自然场景下的表情识别方法,以及一种基于类脑技术的自然场景下的表情识别方法,表情特征提取模型对SCAN模型进行了改进:将backbone ResNet50替换为预训练后的ResNet18提取表情样本的全局及局部纹理信息;将BERT模型中的mask机制替换为排序机制;采用LSTM捕捉样本基于DenseSift关键点表述的时序变化;将基于全局、局部和时序信息的决策概率值进行融合,完善决策的信息提取;结合交叉熵损失函数和卡方估计实现端到端的模型学习。本发明增强了对面部遮挡、头部姿势变化、光照不均匀的鲁棒性,进一步提升了模型的泛化性。