融合大模型与图神经网络的电力设备缺陷诊断
TP391; 电力系统中不同装置设备的缺陷评级和分析处理常受运维人员主观性影响,导致同一缺陷文本描述出现不同的严重程度评级.专业知识的差异也导致诊断分析差异和诊断效率不同.为提升缺陷诊断的准确性和效率,提出一种基于图神经网络的缺陷文本评级分类方法和大模型智能诊断分析助手.构建专业词典,使用自然语言处理算法规范化文本描述.通过统计方法,优化缺陷文本的语义表示.集成图注意力神经网络和RoBERTa模型对缺陷文本进行精确评级分类.基于大语言模型Qwen1.5-14B-Chat进行低秩适配(LoRA)微调训练得到电力设备诊断大模型Qwen-ElecDiag,结合检索增强生成技术开发设备缺陷诊断助手.此...
Saved in:
| Published in | 计算机科学与探索 Vol. 18; no. 10; pp. 2643 - 2655 |
|---|---|
| Main Authors | , , , |
| Format | Journal Article |
| Language | Chinese |
| Published |
河北省能源电力知识计算重点实验室,河北 保定 071003%华北电力大学 计算机系,河北 保定 071003
01.10.2024
华北电力大学 计算机系,河北 保定 071003 北京中恒博瑞数字电力科技有限公司,北京 100085%华北电力大学 计算机系,河北 保定 071003 |
| Subjects | |
| Online Access | Get full text |
| ISSN | 1673-9418 |
| DOI | 10.3778/j.issn.1673-9418.2405085 |
Cover
| Summary: | TP391; 电力系统中不同装置设备的缺陷评级和分析处理常受运维人员主观性影响,导致同一缺陷文本描述出现不同的严重程度评级.专业知识的差异也导致诊断分析差异和诊断效率不同.为提升缺陷诊断的准确性和效率,提出一种基于图神经网络的缺陷文本评级分类方法和大模型智能诊断分析助手.构建专业词典,使用自然语言处理算法规范化文本描述.通过统计方法,优化缺陷文本的语义表示.集成图注意力神经网络和RoBERTa模型对缺陷文本进行精确评级分类.基于大语言模型Qwen1.5-14B-Chat进行低秩适配(LoRA)微调训练得到电力设备诊断大模型Qwen-ElecDiag,结合检索增强生成技术开发设备缺陷诊断助手.此外,整理提供微调电力设备诊断大模型的指令数据集.对比实验结果表明,提出的基于图神经网络的缺陷评级分类方法在准确性上较最优基准模型BERT提升近8个百分点;诊断助手的电力知识以及缺陷诊断能力得到提升.通过提高缺陷评级的准确率并提供全面专业化诊断建议,不仅提高电力设备运维的智能化水平,也为其他垂直领域的智能运维提供新的解决方案. |
|---|---|
| ISSN: | 1673-9418 |
| DOI: | 10.3778/j.issn.1673-9418.2405085 |