如何让多个故障诊断模型真正实现优势互补,而不是简单地投票或加权平均?本期推荐篇论文《Reliability-aware Dynamic Graph Fusion and LLM-based Diagnostic Assistant for Bearing Faults》提出了一种融合动态知识协作、分层证据融合与大语言模型的轴承故障诊断框架。研究通过 VAE 提取全局运行状态,利用图注意力网络(GAT)动态构建诊断智能体之间的协作关系,并引入类似学术同行评审的“回答者—评审者”机制;进一步结合离线可靠性校准与双层 Dempster–Shafer 证据融合,提高噪声干扰、传感器失效及工况变化下的诊断鲁棒性。最后,借助 LLM 与检索增强生成(RAG),将诊断结果及中间证据转化为可追溯、可核查的自然语言报告。由于论文篇幅较长,分为上下两篇介绍。
论文题目:
Reliability-aware dynamic graph fusion and LLM-based diagnostic assistant for bearing faults
论文日期:2026(online)
发表期刊:
Advanced Engineering Informatics 74 (2026), 104720
论文链接:
https://doi.org/10.1016/j.aei.2026.104720
作者:
Tantao Linᵇ,Zhijun Renᵃ˒ᵇ˒*,Kai Huangᵇ,Xinzhuo Zhangᵇ,Hamid Reza Karimiᶜ,Yongsheng Zhuᵇ,Jun Hongᵇ
作者单位:
ᵃ Frontier Institute of Science and Technology, Xi'an Jiaotong University, Xi'an 710049, China.
ᵇ Key Laboratory of Education Ministry for Modern Design and Rotor-Bearing System, Xi'an Jiaotong University, Xi'an 710049, China.
ᶜ Department of Mechanical Engineering, Politecnico di Milano, Milano 20156, Italy.
作者简介:
任智军,机械工程博士,西安交通大学前沿科学技术研究院助理教授、硕士生导师。(来源:https://faculty.xjtu.edu.cn/renzhijun/)
摘要
1. 引言
2. 预备知识
2.1. DS 理论
2.2. LLM-Agent
3. 方法
3.1. 样本感知的图协作诊断
3.1.1. 通过 VAE 建模全局状态
3.1.2. 基于图注意力的智能体门控
3.1.3. 回答者—评审者角色分配
3.2. 结合离线可靠性校准的证据级融合
3.2.1. 离线校准的类别级权重与全局可信度
3.2.2. 内层评审融合
3.2.3. 外层最终融合
3.2.4. 诊断智能体与 VAE 的训练
3.2.5. 图注意力网络的训练
3.2.6. 推理阶段
3.3. 用于轴承融合诊断的基于 LLM 的多智能体助手
3.3.1. 用户交互层
3.3.2. 意图路由层
3.3.3. 任务执行层
3.3.4. 知识库构建与存储层
3.3.5. 记忆层
4. 实验
5. 结论
融合和解释异构证据仍然是多源轴承故障诊断中的一项重大挑战,尤其是在存在噪声、传感器失效和工况变化的情况下。本文提出一种可解释的诊断框架,将基于图的智能体协作、分层证据融合以及基于大语言模型(LLM)的诊断助手集成在一起。首先,构建样本自适应的动态诊断图,将传感器专属的基础模型构建为能够交互的回答者—评审者智能体。利用变分自编码器(VAE)提取全局运行状态表示,以此对图注意力进行条件化,从而实现逐样本的智能体权重分配与拓扑结构自适应。其次,提出一种结合离线可靠性校准的双层 Dempster–Shafer(DS)融合方案:内层融合整合评审者证据,以抑制高度冲突的意见;外层融合则聚合委员会层面的决策,逐步吸收不确定性。最后,基于 LLM 的助手在领域知识库检索的支持下,将结构化的诊断轨迹转换为面向维护、可验证的解释。实验表明,该框架能够持续提高诊断准确率并降低输出熵,同时增强过程可追溯性,支持人类与人工智能协同决策。
关键词: 轴承故障诊断;多源信息融合;图注意力网络;Dempster–Shafer 证据融合;大语言模型。
滚动轴承是旋转机械中的关键部件,其健康状况直接影响运行稳定性、维护成本和系统安全性 [1–3]。由于轴承故障可能逐渐导致严重退化或意外停机,轴承故障诊断已成为智能维护和状态监测领域的重要课题。
近年来,轴承故障诊断已从传统信号处理和浅层学习逐步发展为数据驱动的智能范式 [4]。基于深度学习的方法显著提升了从原始信号、变换后信号以及时频信号中自动提取故障敏感表征的能力,从而减少了对人工设计特征的依赖 [5,6]。近期研究进一步将这一方向拓展至跨域泛化和有限标签学习。例如,基于迁移学习的方法提升了不同工况下的诊断适应性 [7–9];采用联合损失的半监督自编码器提高了振动信号标签有限时的标签利用效率 [10];知识引导的深度网络则通过将先验工程知识引入诊断过程来增强鲁棒性 [11]。这些进展表明,近期研究日益关注的不仅是诊断准确率,还包括数据效率、鲁棒性及工程适应性。
与此同时,随着异构传感器在工业系统中的部署不断增加,轴承监测已逐渐从单源感知发展为多源观测,即联合采集振动、声学、转速、电流及其他异构信号 [12–14]。与单源诊断相比,多源融合能够提高诊断准确率、鲁棒性,以及对噪声或部分信息缺失的容忍能力。现有故障诊断多源融合研究大致可分为以下三类:
(1)数据级/特征级融合。 此类方法通过拼接异构信号、对齐潜在特征,或者利用具有共享融合模块的并行分支,学习多个通道的联合表示 [15–18]。当参与融合的通道能够持续提供有效信息且对齐良好时,这些方法是有效的;然而,它们通常将融合策略隐式编码在网络参数中,因此往往缺乏在单个样本层面显式重新分配各信息源贡献的机制。因此,当传感器失效、突发噪声或显著工况变化导致不同样本的信息源质量发生变化时,不可靠的通道仍可能被传播至共享表示中,具有误导性的跨模态交互甚至可能被放大,而不是受到抑制。
(2)决策级融合。 此类方法通过加权平均、投票或基于 Dempster–Shafer(DS)证据理论的规则,将不同传感器或分类器的输出组合起来 [19–21]。其中,DS 理论因能够显式描述不确定性和无知程度,并为多源证据融合提供灵活框架而得到广泛应用。现有基于 DS 的研究主要沿着两条路线展开:其一,引入考虑不确定性的信源加权或置信度建模,例如将 DS 理论与基于 Dirichlet 分布的不确定性建模相结合,实现置信度感知的传感器加权 [22];其二,通过修改组合规则本身或重新分配冲突质量,提高高冲突条件下的鲁棒性 [23]。与数据/特征级融合相比,这些方法能够更加灵活地集成异构模型,也更适合进行考虑不确定性的聚合。然而,大多数现有研究仍将传感器或分类器视为相对静态、同质化的信息源,只在全局、模型或工况层面估计其可靠性。因此,它们虽然能够组合存在分歧的输出,但当跨模态证据既相互冲突又具有不均衡的可靠性时,通常仍无法判断当前样本应当更加信任哪个信息源。诊断模型之间逐样本变化的动态信任关系因而很少得到刻画,其与深度特征学习和自适应结构建模的结合也仍然有限。
(3)基于图的建模。 此类方法构建样本空间图或传感器空间图,并通过图卷积或注意力机制进行信息传播 [24–27]。例如,Gao 等人 [28] 在 近邻(k-NN)图上构建图卷积网络(GCN),以捕获传感器数据之间的关系。尽管此类方法在建模高阶相关性和非局部依赖方面十分有效,但其图结构通常局限于样本和传感器层面。换言之,它们主要描述相关性结构,却很少显式建模异构诊断决策者之间的协作、评审或冲突仲裁。因此,将来自不同视角的诊断模型或决策单元视为图节点,并根据当前样本的全局状态自适应调整其协作拓扑结构的做法,目前仍不常见。
除提升融合性能外,实际轴承故障诊断还要求诊断结果具有可解释性、置信度感知能力和可审计性 [29,30]。对于安全关键设备,工程师不仅需要了解诊断结果,还需要了解支持该结果的证据,以及结论的可信程度。近来,大语言模型(LLM)已成为故障诊断和预测性维护的一个有前景的研究方向,可实现自然语言交互、检索增强的知识访问以及人机协作 [31–33]。现有研究主要遵循两种代表性范式。一种范式将 LLM 本身作为以诊断为中心的模型。例如,Tao 等人 [34] 将振动信号转换为文本化的时域和频域特征,并对 LLM 进行微调,以支持跨工况、小样本及跨数据集诊断。Lin 等人 [35] 进一步提出 FD-LLM,通过结合数据—文本模态对齐和大模型微调,直接支持故障诊断和维护指导。另一种范式将 LLM 用作高层编排或解释模块,以集成诊断模型、知识图谱和维护策略。例如,Ma 等人 [36] 提出 FDRKG-LLM,用于故障诊断、维护调度和决策解释;Liu 等人 [37] 则探索协作式 LLM-Agent 机制,以提升故障识别效率。尽管这些研究展示了 LLM 在机械诊断中的潜力,但将其与样本自适应证据协作、冲突感知决策融合以及可审计推理轨迹进行系统性集成的研究仍然有限。
在此背景下,本文所解决的关键问题并不是用 LLM 替代诊断主干模型,而是构建一个同时支持样本自适应的多模型协作、冲突感知证据融合及可审计解释的集成框架。因此,一个有效的框架应满足三项要求:在样本层面自适应调整信息源协作;在融合过程中显式管理相互冲突的证据与无知证据;保留结构化的中间轨迹,以供专家审查和解释。
为解决上述挑战,本文提出一种动态图驱动的多智能体证据融合框架。首先,使用变分自编码器(VAE)从多源信号中提取跨模态全局状态,指导图注意力网络(GAT)自适应地构建回答者—评审者诊断智能体之间依赖样本的协作拓扑。随后,利用 DS 证据理论构建双层融合机制,将相互冲突的证据与无知证据区分处理。最后,开发一个基于检索增强 LLM 的多智能体助手,将其作为上层模块,把中间诊断轨迹转化为可验证、面向专家的解释报告。总体而言,该框架增强了决策鲁棒性、不确定性感知和可审计性,并形成模型推理、专家交互与知识演化之间的闭环。本文主要贡献概括如下:
(1)具有显式回答者—评审者协作机制的样本自适应诊断图。 将异构传感器专属的基础模型视为能够交互的智能体,构建动态诊断图。利用 VAE 提取的全局运行状态表示对图注意力机制进行条件化,实现逐样本的智能体加权及拓扑自适应,以选择 Top- 个回答者。进一步在不断演化的图上采用加权随机游走采样方案分配评审者,从而实现有针对性的同行评审和委员会组建。
(2)用于冲突感知决策的离线可靠性校准和分层 DS 融合。 设计一种离线校准策略,估计各模型的类别级能力和全局可信度,并将校准后的预测映射为基本概率分配,在无知集 合上显式分配概率质量。基于委员会结构,引入双层 DS 融合方案:内层融合汇总评审者证据,以抑制高度冲突的意见;随后,外层融合聚合委员会层面的证据,逐步吸收不确定性,并提供可审计的融合轨迹。
(3)用于可审计解释和决策支持的检索增强 LLM 助手。 设计一个基于检索增强 LLM 的助手,将包含智能体选择、权重、委员会分配、冲突及融合轨迹的结构化诊断过程,转化为面向维护、可验证的解释与报告。在噪声干扰、传感器失效及工况变化条件下开展的大量实验表明,与传统投票和标准 DS 基线相比,该方法具有更好的稳定性与可靠性。
本文其余部分安排如下:第 2 节回顾相关理论与背景;第 3 节详细介绍所提出的方法;第 4 节给出实验设计与分析;第 5 节总结全文并讨论未来工作。
DS 理论是用于不确定性表示和证据组合的经典框架,已广泛应用于信息融合和决策支持 [38,39]。本文中的证据源是多个诊断智能体的输出;每个智能体都是一个独立训练的分类器,在识别框架 上输出经过校准的类别概率向量。对于第 个诊断智 能体,设其校准概率向量为 ,可靠性为 。在只将单元素集 合 和全集 作为焦元的常见设定下,相应的基本信任分配(BBA)定义为:
其中,
随后,利用标准 Dempster 组合规则融合来自不同诊断智能体的 BBA [39]。由于该组合规则已十分成熟,本文为简洁起见省略其详细推导。融合后,通过 Pignistic 变换 [40] 将所得 BBA 映射为决策概率。在本文设定下,该变换简化为:
据此,最终决策为
大语言模型通过在海量语料上预训练,获得较强的语言理解和生成能力,因此能够作为通用决策模块嵌入实际系统 [41]。将 LLM 与环境表示、工具调用及反馈机制相结合,可构成能够理解指令、规划子任务并通过交互持续自我纠正的 LLM-Agent [42]。此类智能体的核心组成包括面向任务的记忆结构、一组可调用的外部工具,以及对上下文状态的持续感知与更新 [43,44]。
与单一、整体式的 LLM 相比,多智能体架构能够将功能分解为专门角色,并通过对话或消息传递实现协作,从而提高复杂诊断工作流的可扩展性和鲁棒性 [45,46]。典型角色包括任务路由器、执行智能体和评审智能体。路由器根据历史对话和系统状态选择下一步动作;执行智能体完成数据采样和模型推理等具体任务;评审智能体重新检查推理结果,并在必要时触发纠正措施。此外,检索增强生成(RAG)[47] 允许智能体在生成前查询结构化知识库或历史轨迹,确保其输出与最新的工程文档保持一致,并减少幻觉。
在轴承故障诊断场景中,LLM-Agent 需要与多源传感器、数据驱动模型和不确定性量化机制紧密耦合。首先,路由层必须理解工况相关请求,并合理调度样本处理、诊断和报告生成等子任务。其次,任务执行层应读取诊断轨迹、冲突程度及置信度指标,将其转化为供专家理解的自然语言证据链解释。第三,知识库层必须不断吸收新的维护日志、实验结果及标准操作程序,以支持可验证和可审计的回答。
本节介绍所提出的动态图驱动多智能体证据融合诊断方法的整体设计。首先,针对每个输入样本,构建自适应演化的诊断协作图,以确定哪些诊断智能体担任回答者、哪些担任评审者。其次,在该图基础上引入具有离线校准先验的双层 DS 融合架构,从而显式建模每个诊断智能体的类别级可靠性与总体无知程度。为保证可复现性,还给出了清晰的训练—推理流程。最后,将诊断全过程产生的结构化轨迹与基于 LLM 的多智能体诊断助手对接,实现检索增强、可验证的自然语言解释。
如图 1 所示,本节介绍所提出的动态图评审与融合协作诊断框架的整体结构。框架由三个关键步骤组成:(1)利用 VAE 将多源数据映射到全局状态向量;(2)将该全局状态向量输入基于 GAT 的门控模块,获得智能体置信权重及当前预测图;(3)根据置信权重选择回答者智能体,并从图中采样评审者智能体,以产生最终决策。
图 1. 采用动态图评审与融合的协作诊断框架。
在多源轴承诊断场景中,原始信号通常包含多种类型(如振动、电流、声发射等),采样率彼此不同,并且工况各异,因此单一诊断模型很难在所有工况下均保持稳定性能。在本文中,将多个互补的故障诊断模型抽象为一组诊断智能体
为了捕获当前多变量输入的全局状态,本文使用 VAE(如图 2 所示)对多源输入
为了捕获当前多源输入的全局状态,采用变分自编码器(VAE)将预处理后的信号矩阵
编码器
图 2. VAE 编码器—解码器架构示意图。
给定样本级表示
为了联合编码当前样本状态和历史先验信息,从而增强表示能力,将当前全局状态
其中,
其中,
其中,
其中,
其中,
虽然图注意力能够提供智能体的“重要性排序”,但有效的协作诊断还需要明确分配角色。根据图注意力门控模块输出的置信权重
其中,
在实际学术同行评审中,论文通常分配给研究背景高度相关的专家,以确保评审具有针对性且技术上充分。类比这一过程,本文旨在智能体之间建立由相似性驱动的评审分配机制,使每位回答者的输出由图结构中在语义或特征上最相关的其他智能体进行评价。
设分配给每个回答者智能体的评审者数量为
下一位评审者从经过掩码处理的转移分布中采样:
其中,
这一过程实际上形成了一组小型局部委员会。每个委员会由一名回答者和若干名在图中密切相关、但意见可能不同的评审者组成。这些局部委员会为后续“先局部融合,再全局聚合”的策略奠定了基础。
在前一步得到的局部委员会中,不同诊断智能体面对同一样本时,可能表现出不同的可靠性和不确定性。因此,直接平均或投票容易使不可靠意见获得过大的影响,尤其是在跨模态证据既相互冲突又可靠性不均衡时。为解决这一问题,本文并不只依赖单层置信度加权或事后冲突处理,而是引入双层 DS 融合方案。具体而言,首先通过离线校准估计每个智能体的类别级能力和总体可信度,并构建显式包含无知质量的可靠性感知 BBA;随后,从每个委员会内部的局部评审开始逐步聚合,直至形成跨委员会的全局共识。
如算法 1 所示,首先在验证集
其中,
其中,
其中,
算法 1. 离线校准:类别级权重与全局可信度。
随后,通过宏平均 F1 分数估计总体可信度:
其中,
其中,
为与第 2.1 节介绍的双焦元建模保持一致,这里采用相同形式的 BBA,以使内层和外层融合均可直接通过标准 DS 组合实现。最后,将校准后的概率
这种 BBA 表示通过在
对于每个 局部委员会,根据经过离线校准的 BBA 执行内层融合。设与回答者智能体
其中,
不同回答者智能体对应不同领域和传感器组合,需要在更高层级进一步集成各委员会层面的结论。因此,将回答者的内层输出视为独立专家的意见,在“全体会议”层面聚合不同领域专属委员会的决策,从而形成全局共识。为避免类别级偏差的重复引入,外层融合采用统一类别权重
其中,
当
诊断智能体模型可以灵活选择,包括传统机器学习模型和深度神经网络。每个智能体在训练集上独立训练,通过优化类别预测的交叉熵损失来学习。训练结束后,保存所有智能体模型的参数,供推理阶段使用。
VAE 以
为了使第 3.1 节的协作机制具备可学习性,训练时引入显式的“多数否定与软修正”监督信号,使回答者智能体在获得同行评审反馈后能够调整有偏的预测,并逐步学习更加可靠的预测分布。该机制受人类同行评审过程启发:作者(对应回答者智能体)提交初稿后,如果大多数评审者(对应评审者智能体)不同意其结论,作者通常会综合评审意见修改稿件。
首先,按照式(31)计算每个回答者与其评审者之间的预测分布相似度,以量化意见一致性:
其中,
如式(32)—(34)所示,当发生多数否定事件——即超过半数评审者不同意回答者预测概率最高的类别——系统将自动触发修正机制:用评审者分布的相似度加权融合结果替代回答者智能体的输出,以反映集体意见:
其中,
如果未触发多数否定条件,则令
其中,
最后,对多个回答者智能体的融合输出进行线性聚合,得到最终概率向量
其中,
为了使 GAT 能够观察足够多的协作轨迹并实现有效学习,针对每个样本执行
其中,
其中,
GAT 的整体训练过程同时结合结构监督和权重监督,如算法 2 所示。对于每个样本(或小批量),通过最小化式(39)定义的损失函数
算法 2. 训练:基于 GAT 的多步图演化及多数否定软修正。
其中,
在推理阶段,首先利用离线校准得到的类别级权重和全局可信度调整每个智能体的预测概率,并构建相应的 BBA。随后应用双层 DS 融合结构进行决策,如算法 3 所示。该过程既保留局部专家共识,又保留全局集体智能;DS 理论能够有效处理多源证据高度冲突条件下的信息融合,从而增强诊断结果的鲁棒性和可靠性。
算法 3. 推理:双层 DS 融合。
上述融合诊断过程会产生结构化诊断轨迹,包括样本级表示、选中的回答者和评审者智能体、其权重与可信度、内外两层 DS 融合的中间量,以及最终诊断结果。为了使现场工程师及上层应用能够理解、追踪和验证这些信息,需要一个能够处理用户交互、任务调度与执行,以及诊断报告生成与存储的智能助手。为此,本文设计了一个基于 LLM 的多智能体协作诊断助手:该助手使用自然语言理解用户指令,编排底层诊断模块执行数据采样、诊断和报告生成,并以结构化、可审计的形式向用户返回结果。
在一次典型交互中,用户通过自然语言请求轴承状态诊断,助手随后将请求路由至数据采样和多智能体协作诊断,生成决策结果及其诊断轨迹;之后在知识库中进行 RAG 检索,以生成结构化、可验证的报告并回答后续问题。
助手的架构如图 3 所示,由五层组成:(1)用户交互层;(2)意图路由层;(3)任务执行层;(4)知识库构建与存储层;(5)记忆层。以下详细介绍各层的设计。
图 3. 所提出的基于 LLM 的多智能体协作诊断助手框架示意图。
用户交互层支持与用户进行自然语言交流,记录用户与助手之间的对话历史
基于 LLM 的路由器以
其中,
采样任务(Sample task)。 根据采样配置
诊断任务(Diagnosis task)。 VAE 提取全局状态,GAT 执行智能体选择和结构预测。基于 DS 证据理论的回答者—评审者协作及双层融合随后产生
解释/报告任务(Explanation/report task)。 报告智能体读取
普通聊天任务(Normal chat task)。 当路由器选择聊天任务时,助手根据
将领域文档集 合
记忆层统一管理四类缓存:
通过上述架构,操作人员能够借助与诊断助手的自然语言交互,完成从信号采集、故障诊断到报告生成的整个工作流。多智能体协作框架不仅提高了诊断的自动化和智能化水平,也增强了可解释性与可追溯性,满足工业场景对可靠诊断决策的要求。
上篇结束。原文第 4 节“实验”及之后的内容见下篇。