在审

一种多模态大模型知识蒸馏的电力作业目标检测方法

李冰洋、王自军、文耀宽、李秀清、陈旭、王刚、张向阳、李桂林、王峻、刘启明、姚强、何心铭、田闽哲、李琳、周默、都静静、刘洋、薛娜娜
国网河南省电力公司营销服务中心
李冰洋 专利 82
国网河南省电力公司营销服务中心
模式识别商务信息处理计算技术
王自军 专利 3
国网河南省电力公司营销服务中心
物理仪器仪器测试或校准电磁测量
文耀宽 专利 36
国网河南省电力公司营销服务中心
物理仪器信息通信行业流程商务信息处理
李秀清 专利 45
国网河南省电力公司营销服务中心
计算技术物理仪器模式识别
陈旭 专利 48
国网河南省电力公司营销服务中心
模式识别计算模型系统商务信息处理
王刚 专利 104
国网河南省电力公司商丘供电公司
发电变电配电电学物理仪器
张向阳 专利 19
国网河南省电力公司营销服务中心
物理仪器计算技术信息通信行业流程
李桂林 专利 12
国网河南省电力公司营销服务中心
计算模型系统计算技术模式识别
王峻 专利 19
国网河南省电力公司营销服务中心
物理仪器计算模型系统计算技术
刘启明 专利 24
国网河南省电力公司营销服务中心
物理仪器计算技术商务信息处理
姚强 专利 364
武汉大学
光学法测试材料电性能及故障测材料测试分析
何心铭 专利 31
河南九域腾龙信息工程有限公司
计算技术物理仪器模式识别
田闽哲 专利 58
郑州威达电子有限公司
模式识别物理仪器电子数据处理
李琳 专利 7
国网河南省电力公司营销服务中心
计算技术物理仪器视觉识别
周默 专利 38
郑州轻工业大学
物理仪器信息通信行业流程商务信息处理
都静静 专利 25
国网河南省电力公司营销服务中心
物理仪器商务信息处理计算技术
刘洋 专利 15
国网河南省电力公司营销服务中心
物理仪器计算技术电磁测量
薛娜娜 专利 2
国网河南省电力公司营销服务中心
视觉识别图像视频识别计算技术

摘要

本申请涉及目标检测领域,其具体地公开了一种多模态大模型知识蒸馏的电力作业目标检测方法,其利用视觉‑语言多模态大模型作为教师模型,通过拓展提示词引导,为未标注的电力作业图像生成高质量的伪标签及区域‑文本对作为监督信号,在此基础上,通过联合优化检测损失、特征蒸馏损失、逻辑蒸馏损失以及多模态对比学习损失,引导轻量级YOLO学生模型不仅学习定位与分类知识,更在特征空间与语义层面与教师模型的开放词汇理解能力进行深度对齐,从而有效弥合封闭类别检测与开放世界感知之间的语义鸿沟。通过这样的方式,显著提升了学生模型对电力作业场景中常见及稀有、甚至未见目标的检测精度与泛化能力。

暂无引用专利