利用人工智能的多模式情绪识别装置、方法以及存储介质

本发明涉及一种利用人工智能的多模式情绪识别装置、方法以及存储介质。本记载中的利用人工智能的多模式情绪识别装置，包括：数据输入部，接收用户的影像数据以及语音数据；数据预处理部，包括语音预处理部以及影像预处理部，所述语音预处理部从所述语音数据生成语音特征数据，所述影像预处理部从所述影像数据生成一个以上的面部特征数据；初步推断部，基于所述影像数据来生成与用户的状况根据时间顺序的变化与否相关的状况判断数据；以及主推断部，基于所述语音特征数据或者所述面部特征数据来生成至少一个子特征图，并基于所述子特征图以及所述状况判断数据来推断用户的情绪状态。