在审

一种基于面部表情半监督学习的情绪识别方法及系统

李晖、苏远歧、朱忠良、杨旸、王翔宇、金茜
西安交通大学医学院第一附属医院

摘要

本发明公开了一种基于面部表情半监督学习的情绪识别方法及系统,将视频数据转换为视频帧序列,并对视频帧序列进行预处理;使用OpenPose对视频帧序列进行面部关键点标注,构建具有关键点标注的表情数据集;从具有关键点标注的表情数据集中选取部分关键帧,结合面部动作单元以及面部关键点与动作单元之间的关系进行动作单元的人工标注及审核,建立表情与情绪数据集;基于具有关键点标注的表情数据集和表情与情绪数据集,构建基于部分面部动作单元专家组人工标注与审核的半监督学习的表情识别网络;将新采集的视频数据输入半监督学习的表情识别网络中,得到情绪识别结果。本发明方法降低了标注的难度,提升了婴幼儿面部情绪识别的精度。

暂无引用专利