基于自适应提示与动态查询的零样本语义分割方法与装置

本申请涉及一种基于自适应提示与动态查询的零样本语义分割方法及装置。所述方法包括：获取图像数据及对应的类别语义信息，并进行预处理，得到输入图像和输入类别语义文本；构建基于自适应提示与动态查询的零样本语义分割模型，所述模型包括视觉编码器、文本编码器、自适应视觉提示模块、动态语义查询模块和图像分割预测模块；将所述输入图像和输入类别语义文本输入所述零样本语义分割模型中，设计结合分割监督与不同模态对齐约束的损失函数，进行模型训练与优化；在传导式或归纳式零样本设定下，使用待处理图像对所述零样本语义分割模型进行测试，输出相应的分割结果。显著提升了复杂场景下的零样本语义分割准确性与鲁棒性。