1.基于多模态大模型的电网调度自动化智能运维方法,其特征在于,包括以下步骤:S1:预先构建由语言处理模型、图像识别模型以及AIGC运维模型组成的多模态大模型;S2:输入文字输入信息及图像输入信息,并在图像输入信息中叠加标记信息;所述标记信息为操作人员在图像输入信息中绘制的封闭图形;S3:由多模态大模型中的图像识别模型识别图像输入信息以及标记信息,输出文字描述信息;所述S3包括:由多模态大模型中的图像识别模型对图像输入信息进行目标检测,识别图像中的场景,输出场景描述信息,并对标记信息所涉及的图像区域进行单独的目标检测,识别并输出图像区域中关于目标设备的设备描述信息;基于预设的描述模板,将场景描述信息与设备描述信息整合,输出文字描述信息;S4:由多模态大模型中的语言处理模型比较并合成文字输入信息与文字描述信息,生成文字线索合集;所述S4包括:由多模态大模型中的语言处理模型对文字输入信息与文字描述信息进行识别,得到与运维任务相关的关键词作为线索信息,将提取出的线索信息以结构化的方式进行表示;对线索信息进行对齐和融合处理,得到文字线索合集;S5:由多模态大模型中的AIGC运维模型分别独立读取文字输入信息以及文字线索合集,输出对应的不同运维方案文本,同时基于文字线索合集的关键词对历史运维方案进行检索,得到检索结果;其中,基于文字输入信息输出第一运维方案文本,基于文字线索合集输出第二运维方案文本;S6:判断不同运维方案文本与检索结果的匹配度,若匹配度均低于阈值,则执行S7,否则输出匹配度不低于阈值的运维方案文本及检索结果;S7:输出运维方案文本和检索结果,并提示风险信息,若接收到更改指令,则基于更改指令得到更改后的文字输入信息和/或文字描述信息,回到S4,若接收到重置指令,则回到S2。
2.根据权利要求1所述的基于多模态大模型的电网调度自动化智能运维方法,其特征在于,所述S1:预先构建由语言处理模型、图像识别模型以及AIGC运维模型组成的多模态大模型,包括:基于若干Transformer编码器构建BERT模型,训练所述BERT模型以获得语言处理模型;基于实时目标检测算法构建YOLO模型,训练所述YOLO模型以获得图像识别模型;基于Transformer的架构,采用多层自注意力机制和位置编码构建GPT模型,训练所述GPT模型以获得AIGC运维模型。
3.根据权利要求1所述的基于多模态大模型的电网调度自动化智能运维方法,其特征在于,所述S2:输入文字输入信息及图像输入信息,并在图像输入信息中叠加标记信息,包括:通过语音或文本输入的方式输入文字输入信息;通过拍摄或导入的方式输入图像输入信息;显示所述图像输入信息,由操作人员在图像输入信息中绘制封闭图形以构成标记信息,记录标记信息的坐标,基于坐标位置将标记信息叠加在图像输入信息中。
4.根据权利要求1所述的基于多模态大模型的电网调度自动化智能运维方法,其特征在于,所述S5:由多模态大模型中的AIGC运维模型分别独立读取文字输入信息以及文字线索合集,输出对应的不同运维方案文本,同时基于文字线索合集的关键词对历史运维方案进行检索,得到检索结果,包括:由多模态大模型中的AIGC运维模型读取文字输入信息,基于文字输入信息输出第一运维方案文本;由多模态大模型中的AIGC运维模型读取文字线索合集,基于文字线索合集输出第二运维方案文本;同时,调取历史运维方案,以文字线索合集中的关键词在历史运维方案中进行检索,将关联性最高的训练集对应的运维方案作为检索结果。
5.根据权利要求4所述的基于多模态大模型的电网调度自动化智能运维方法,其特征在于,所述S6:判断不同运维方案文本与检索结果的匹配度,若匹配度均低于阈值,则执行S7,否则输出匹配度不低于阈值的运维方案文本及检索结果,包括:确定匹配度的判断维度,基于判断维度对不同运维方案文本与检索结果进行对比,得到每个运维方案文本与检索结果的匹配度;若匹配度均低于阈值,则执行S7;否则输出匹配度不低于阈值的运维方案文本及检索结果,该运维方案文本及检索结果将被认定为可靠方案。
6.根据权利要求1所述的基于多模态大模型的电网调度自动化智能运维方法,其特征在于,所述S7:输出运维方案文本和检索结果,并提示风险信息,若接收到更改指令,则基于更改指令得到更改后的文字输入信息和/或文字描述信息,回到S4,若接收到重置指令,则回到S2,包括:利用不同的颜色标记运维方案文本和检索结果中的相同部分与不同部分,利用风险信息的提示对运维方案文本和检索结果的显示区域进行覆盖;在所述风险信息中的确认按钮被点击后,清除风险信息并重新显示运维方案文本和检索结果;若选择更改文字输入信息和/或文字描述信息,则将文字输入信息和/或文字描述信息完整显示并设置为可编辑,基于更改指令进行编辑后,生成更改后的文字输入信息和/或文字描述信息;若接收到重置指令,则回到S2。
7.基于多模态大模型的电网调度自动化智能运维系统,包括运维服务器与运维终端,其特征在于,所述运维服务器与运维终端被配置为用于执行权利要求1至6中任意一项所述的基于多模态大模型的电网调度自动化智能运维方法。
8.一种电子设备,其特征在于,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器调用所述存储器中的计算机程序时实现如权利要求1至6中任意一项所述的基于多模态大模型的电网调度自动化智能运维方法的步骤。
9.一种存储介质,其特征在于,所述存储介质中存储有计算机可执行指令,所述计算机可执行指令被处理器加载并执行时,实现如权利要求1至6中任意一项所述的基于多模态大模型的电网调度自动化智能运维方法的步骤。