热梯度引导的RGB-热红外融合用于智能外墙空鼓检测

《Expert Systems with Applications》:Thermal-gradient-guided RGB–thermal fusion for intelligent facade hollow diagnosis

【字体: 大 中 小 】 时间:2026年08月28日 来源:Expert Systems with Applications 9.4

编辑推荐:

   摘要外立面空鼓缺陷是外墙饰面层中隐蔽的脱粘失效。像素级 delineation 对于缺陷定量分析和修复范围估算至关重要,但由于热红外图像中的空鼓边界往往呈现为渐变过渡带而非锐利轮廓,这一直是一项难题。残余的RGB–热红外错配进一步削弱了这些模糊区域附近的跨模态对应关系。本研究

  

摘要

外立面空鼓缺陷是外墙饰面层中隐蔽的脱粘失效。像素级 delineation 对于缺陷定量分析和修复范围估算至关重要,但由于热红外图像中的空鼓边界往往呈现为渐变过渡带而非锐利轮廓,这一直是一项难题。残余的RGB–热红外错配进一步削弱了这些模糊区域附近的跨模态对应关系。本研究提出了TGDA-Net,一种面向外立面空鼓诊断的边界感知RGB–热红外分割框架。该框架首先在特征提取前对热红外图像执行学习的残差局部变形。随后从变形后的热红外图像中提取热梯度响应,并将其作为像素级门控融合和边界监督的软结构先验。同时采用裂纹到空鼓的迁移与回放策略,以在有限的空鼓标注条件下稳定训练。在公开的无人机外立面RGB–热红外基准数据集上的实验表明,完整的TGDA-Net实现了0.846的IoU、0.897的MCC和0.797的bFscore,同时将边界外假阳性率降低至0.049。与具有代表性的通用、RGB–热红外及RGB-X基线方法相比,our-base的主要优势在于边界定位、边界外假阳性抑制以及面向修复范围的面积估算。

引言

外立面空鼓缺陷是外墙饰面层中由于饰面层与基层之间局部脱粘而产生的隐蔽界面失效(Coti?等人,2015;Gong等人,2024;Tomita和Chew,2022)。如果不及时检测,它们可能发展为开裂、脱层和坠落危害(Fan等人,2025;Tomita和Chew,2022;P. Wang等人,2024)。因此,空鼓区域的可信定位和范围 delineation 对于工程检测、维护优先级排序和修复规划具有重要意义。
目前外立面空鼓检测仍然高度依赖人工经验和接触式技术,包括敲击检查和局部确认检测(Tomita和Chew,2022)。基于敲击的声学检测也需要空间采样和操作者交互(Louhi Kasahara等人,2020)。这些方法在选定点的确认方面是有效的,但劳动强度大、主观性强,且难以扩展到大面积外立面。红外热成像提供了一种非接触手段来捕获表面温度分布,并显示出在筛选隐蔽脱粘和分层缺陷方面的巨大潜力(J. Chen等人,2025;Coti?等人,2015;J. Lin等人,2022)。然而,热响应强烈受到环境激励、材料特性和采集条件的影响。热图像中的空鼓边界通常表现为渐变的温度过渡区域而非锐利轮廓(Gong等人,2024;Q. Li等人,2024)。因此,仅依赖热成像的分析在弱对比度、背景干扰或遮挡条件下容易受到假警和漏检的影响。
深度语义分割提供了一种直接手段,可生成像素级掩膜用于面积测量、位置标注和可视化报告(Long等人,2015;Ronneberger等人,2015;Xie等人,2021;Zhao等人,2017)。在外立面空鼓检测中,RGB图像提供可见纹理、几何上下文和结构边缘信息,而红外热成像捕获与地下脱粘相关的表面温度响应。它们的互补性为RGB–热红外外立面检测提供了基础(Gong等人,2024;Ha等人,2017;Q. Li等人,2024;Shivakumar等人,2020;Sun等人,2019)。因此,RGB–热红外融合是一种自然策略。然而,通用的RGB–热红外分割方法并不完全适配此任务。外立面空鼓缺陷是稀疏的,其轮廓在热上是弥散的,微小的残余RGB–热红外偏移可能会影响边界定位。这些特征使得空鼓分割不同于一般的RGB–热红外场景解析,后者的主要目标通常是在光照变化或局部遮挡下的鲁棒语义识别。
为了解决这些问题,本研究聚焦于空鼓边界周围的热梯度响应。在外立面热成像中,空鼓区域通常伴随着空间温度过渡带。这些过渡结构为轮廓定位提供了边界相关信息,因此被用于指导RGB–热红外融合和边界监督。
基于这一视角,我们提出了TGDA-Net,一种面向外立面空鼓诊断的边界感知RGB–热红外分割框架。首先,一个学习的残差局部变形模块在特征提取前对热红外图像执行学习的残差变形。随后从变形后的热红外图像中提取归一化的热梯度图。其次,一个像素级门控分支利用学习的模态特征、热梯度线索和基于熵的可靠性线索来调整RGB和热红外特征的局部贡献。第三,一种边界为中心的监督方案结合了掩膜导出的轮廓监督和热梯度一致性。为了解决有限的空鼓标注问题,进一步探讨了裂纹辅助预训练和回放作为空鼓适配过程中的源域正则化。
主要贡献总结如下:
  • 1.
    提出了一种基于热梯度条件的RGB–热红外外立面空鼓分割公式。从变形后的热红外图像中提取的热梯度响应被用作空间自适应融合和边界监督的软结构线索。
  • 2.
    开发了TGDA-Net,作为一个统一的分割框架,结合了学习的残差局部变形、双流RGB–热红外编码、像素级门控融合和边界为中心的监督。
  • 3.
    探索了裂纹辅助预训练和回放作为有限空鼓标注条件下的源域正则化方法。
  • 4.
    与具有代表性的通用、RGB–热红外和RGB-X分割基线进行了全面的实验对比。评估包括代理场景级分组划分、统计分析、组件交互消融、受控错配测试、诊断可视化和失效模式分析。

章节摘录

红外热成像在外立面空鼓检测中的应用

红外热成像长期以来被视为检测建筑外立面脱粘、空鼓和分层的有效无损工具,因为它具有非接触、可扩展至大面积且对隐蔽缺陷敏感的特点(J. Chen等人,2025;Coti?等人,2015;Hong等人,2018)。Tomita等人的综述表明,它在早期识别潜在外立面失效方面具有明显潜力(Tomita和Chew,2022)。同时,其可靠性……

概述

TGDA-Net针对三种任务特定的困难设计用于RGB–热红外外立面空鼓分割:微小的残余跨模态偏移、空间变化的模态可靠性以及热弥散的边界。该框架使用从变形后的红外图像中提取的热梯度响应作为软结构先验。
如图1所示,输入的RGB和红外图像首先由一个学习的残差局部变形模块处理,实现为学习的残差局部变形。

数据集

本研究使用了两个数据集:一个用于源域预训练和回放的裂纹数据集,以及一个用于目标域空鼓分割的外立面RGB–热红外数据集。两个数据集都重新整理为相同的文件夹结构和标注格式,以确保统一的训练和评估流程。
源域数据集是Crack900-MendeleyDat(Huang等人,2024),包含914对像素级裂纹标注的RGB和热红外图像。这些图像采集于……

随机图像级划分下的架构导向对比

为评估TGDA-Net在外立面空鼓分割中的有效性,从三类中选取了具有代表性的基线方法:通用分割模型、RGB-热红外分割模型和RGB-X分割架构。通用模型包括DeepLabV3+、PSPNet、SegFormer和UPerNet,使用四通道RGB–热红外早期融合实现。RTFNet、EGFNet和HAPNet被选为RGB-热红外专用基线,而CSFNet、CMNeXt和CMX……

结论

本研究使用无人机图像探索了RGB–热红外外立面空鼓分割。主要困难在于在残余的RGB–热红外错配和空间变化的模态可靠性条件下 delineation 热弥散的空鼓边界。为解决这一问题,TGDA-Net使用热梯度响应作为软结构先验来协调学习的残差局部变形、像素级RGB–热红外融合和边界为中心的监督。裂纹到空鼓的迁移与回放……

未引用参考文献

Chen等人,2025;Li等人,2024;Qashqai等人,2026;Zhang等人,2023。

利益冲突声明

作者声明不存在已知的竞争财务利益或个人关系,这些利益或关系可能会影响本文所述的工作。

致谢

本研究由国家地震工程研究中心机动基金(编号2025ZZB5007和2025ZZB1001)和国家自然科学基金委员会中国(资助编号52438006)资助。
黄家涛|刁宇|杜一鸣|庞杰文
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号