轨道异物识别方法及装置

本发明公开了一种轨道异物识别方法及装置，其中该方法包括：利用目标检测模型对采集的轨道图像进行处理，以召回率识别出异物候选区域并生成候选框信息；基于候选框信息，对图像进行裁剪或高亮处理并结合场景元数据构造的包含坐标和线路信息的结构化提示词，形成图像片段与提示词的输入对；基于图文多模态大模型对所述输入对进行分析；所述图文多模态大模型用于基于检索增强生成技术引入外部知识库，对每个候选区域进行深度语义理解，输出是否为异物、异物类别、风险等级和处置建议的结构化结果；输出异物类别风险等级和对应的处置建议。本发明用以提升轨道异物识别、风险评估和处置响应的效率和准确率。