有效

一种基于面部和行为识别融合的工程车安全驾驶监测系统

顾友华、秦网根、李成林、王锐、孙志林、黄友群、周进、文思洵
南京派光智慧感知信息技术有限公司

摘要

本发明涉及监控系统技术领域,具体为一种基于面部和行为识别融合的工程车安全驾驶监测系统。首先,本发明提出一种双分支感知模型用于面部感知,通过全局和局部注意力机制分别捕获驾驶员的整体面部特征和局部细节特征,从而提高疲劳驾驶和分心驾驶的识别准确性。其次,本发明提出一种多模态识别词向量分析方法用于行为感知,利用不同模型实时识别驾驶员的躯干和周围环境图像,将行为词向量与物体词向量进行比对,以判断驾驶员是否存在不规范操作。最后,本发明通过Q‑Learning算法对多种数据进行整合和学习,通过强化学习生成精准的辅助驾驶指令,从而提升驾驶员的使用体验。