1.一种水利水电工程多维安全调度方案辅助智能决策方法,其特征在于,所述决策方法包括:步骤S1:收集目标水利工程的相关多模态数据;步骤S2:将结构化/非结构化文本数据转换为Json格式,形成用于知识图谱输入的广义事实三元组结构,包括:从水利工程相关数据中提取多种工况下各事件的风险传递路径以及对应应急处置措施与预案,并采用文本编码器Text-LSTM-Adam对实体描述性文本进行编码,获取对应表示;步骤S3:整理并划分水利枢纽运行监测图像,生成基于时序或因果关系的事实三元组的图像表示,包括:整理并划分水利枢纽运行监测图像;利用图像编码器对实体图像进行建模,对图像进行特征增强,利用特征提取器结合矩阵投影获取对应图像特征;根据风险专业结合加权平均生成基于事实三元组的图像表示;步骤S4:文本数据中包含对应时刻,图像数据中添加时间标注,或根据时序对提取图像进行标注;步骤S5:采用文本嵌入与图像嵌入的整合方式,实现基于文本的图像增强的实体关系嵌入;步骤S6:在采用文本-图像整合方式下,创建基于文本数据校验的图像实体,并进行风险推理。
2.根据权利要求1所述的一种水利水电工程多维安全调度方案辅助智能决策方法,其特征在于,所述步骤S1:收集目标水利工程的相关数据具体包括:监测数据、运行日志、应急预案、风险报告、相关调度运行文献的数字、图像信息。
3.根据权利要求1所述的一种水利水电工程多维安全调度方案辅助智能决策方法,其特征在于,所述步骤S4:文本数据中包含对应时刻,图像数据中添加时间标注,或根据时序对提取图像进行标注具体包括:为表征水利枢纽中风险在时空层面的叠加,文本数据中包含对应时刻,图像数据中应添加时间标注,或根据时序对提取图像进行标注。
4.根据权利要求1所述的一种水利水电工程多维安全调度方案辅助智能决策方法,其特征在于,所述步骤S5:采用文本嵌入与图像嵌入的整合方式,实现基于文本的图像增强的实体关系嵌入具体包括:采用文本嵌入与图像嵌入的整合方式,实现基于文本的图像增强的实体关系嵌入;采用自然语言监督信号指导模型训练完成图像与文本间的匹配。
5.根据权利要求1所述的一种水利水电工程多维安全调度方案辅助智能决策方法,其特征在于,所述步骤S6:在采用文本-图像整合方式下,创建基于文本数据校验的图像实体,并进行风险推理具体包括:在采用文本-图像整合方式之下,创建基于文本数据校验的图像实体;采用基于联合并行训练三元组嵌入,获取水利工程风险知识图谱并构建风险传递全链条,实现风险推理。
6.根据权利要求1所述的一种水利水电工程多维安全调度方案辅助智能决策方法,其特征在于,所述采用文本编码器Text-LSTM-Adam对实体描述性文本进行编码具体包括:将随机初始化文本a所获的词向量或基于bert训练获取的词向量作为输入,经过网络卷积、池化操作后获取文本向量;构建多层LSTM网络,利用Densn分类器并对所有字符softmax。