有效

图像故事描述生成方法、装置、计算机设备和存储介质

谢毓湘、闫洁、宫铨志、魏迎梅、蒋杰、康来、栾悉道、邹诗苇、李竑赋
中国人民解放军国防科技大学

摘要

本申请涉及一种图像故事描述生成方法、装置、计算机设备和存储介质。所述方法包括:构建数据集;数据集中包括多个图像样本以及每个图像样本对应的问题描述;每个问题描述至少包括疑问词和名词;根据数据集,训练预先构建的图像描述生成模型,以使图像描述生成模型在输入图像时,可以输出图像对应的问题描述;将待描述图像输入训练好的图像描述生成模型,得到待描述图像的问题描述;通过命名实体识别方式从述待描述图像的问题描述中提取疑问词‑名词对,将疑问词‑名词输入预先训练的长文本故事生成模型,得到故事文本。采用本方法能够更好地指导故事的生成。