一种音视频全方位拟真培训方法及系统

本发明公开了一种音视频全方位拟真培训方法及系统，包括：采集执行拟真操作的音频数据和视频数据，获取所述音频数据标注音频特征，以及对所述视频数据中的坐席人员进行仪态行为的识别，得到手势与动作，并根据级联分类器获取手势与动作非线性的图像特征；其中，所述图像特征是根据级联分类器第一级输出所述手势与动作的中间特征，作为级联分类器第二级的至少一个输入得到的；将所述音频特征和所述图像特征进行融合，根据得到的融合特征检测所述坐席人员的情感倾向，并根据所述情感倾向对所述坐席人员进行评估，获取所述坐席人员的培训进展；采用本发明能够提高培训拟真的精确度和培训效率。