有效

一种基于关键词的大坝缺陷图像描述文本生成方法

毛莺池、钱俊、陈静、徐淑芳、李源、王龙宝、平萍
河海大学

摘要

本发明公开了一种基于关键词的大坝缺陷图像描述文本生成方法,步骤为:将分解机模型与RNN编码器相结合,将缺陷关键词作为编码器的输入;将编码器语义向量通过注意力机制分配权重,控制缺陷描述文本语义;采用LSTM解码器进行文本预测,通过输入门、遗忘门和输出门来控制隐藏状态中信息的流动,减少传统循环神经网络梯度消失或梯度爆炸的现象。本发明弱化输入序列之间的时序性,强调缺陷关键词之间的成因关联,不仅能够生成完整语义的描述文本,同时还避免了梯度爆炸现象。经分解机编码器与解码器模型生成的描述文本能够准确并连贯地描述缺陷信息,还能够清晰表达缺陷之间的成因关联。