基于多模态图像的钢轨轨头踏面伤损检测方法及装置

本发明公开了一种基于多模态图像的钢轨轨头踏面伤损检测方法及装置，其中该方法包括：获取待检测钢轨的钢轨图像和钢轨的振动数据，其中，钢轨的振动数据由车轮的轴箱中搭载的垂直方向的加速度传感器获得；将所述振动数据生成振动波形，并将所述振动波形转换为2D波形图像；将所述钢轨图像、所述振动波形和所述2D波形图像融合，生成多模态钢轨图像；将所述多模态钢轨图像输入到轨头踏面伤损识别模型中，获得轨头踏面伤损识别结果。本发明通过融合钢轨图像和钢轨的振动数据，可以丰富图像中的信息量与特征，提升伤损的检出率和准确率。