在审
基于推理路径增强的模型训练方法、装置、介质及产品
摘要
本发明提供了一种基于推理路径增强的模型训练方法、装置、介质及产品,该方法包括:构建针对铁路勘察设计领域的推理轨迹数据集;将推理轨迹数据集进行格式化处理,得到格式化处理后的推理轨迹数据集;采用参数高效微调法对模型进行微调,得到微调后的基础大语言模型;配置模型训练环境,并确定模型的关键超参数;将格式化处理后的推理轨迹数据集作为训练样本输入到微调后的基础大语言模型中;采用自回归模型训练法对微调后的基础大语言模型进行模型训练,直至关键超参数收敛时获取训练好的大语言模型。本发明通过训练出一个具备领域逻辑分解和循证检索机制的专业大语言模型,实现了查询过程透明化以及查询结果的高准确率和高可信度。
暂无引用专利





