红外和可见光图像融合的隧道火源深度估计技术
胡青松
袁淑雅
罗渝嘉
李世银
中国矿业大学 信息与控制工程学院,江苏 徐州 221116
摘要：矿井巷道、交通隧道等场景受火灾威胁的困扰,采用基于图像的智能火灾探测方法在火灾初期快速识别其发生位置具有重要意义.现有方法面临时间序列一致性问题,且对相机姿态变化具有高度敏感性,在复杂动态环境中的识别性能下降.针对该问题,提出一种红外(IR)和可见光(RGB)图像融合的隧道火源深度估计方法.引入自监督学习框架的位姿网络,来预测相邻帧间的位姿变化.构建两阶段训练的深度估计网络,基于UNet网络架构分别提取IR和RGB特征并进行不同尺度特征融合,确保深度估计过程平衡.引入相机高度损失,进一步提高复杂动态环境中火源探测的准确性和可靠性.在自制隧道火焰数据集上的实验结果表明,以Resnet50为骨干网络时,构建的隧道火源自监督单目深度估计网络模型的绝对值相对误差为 0.102,平方相对误差为 0.835,均方误差为 4.491,优于主流的Lite-Mono,MonoDepth,MonoDepth2,VAD模型,且精确度阈值为1.25,1.252,1.253 时整体准确度最优;该模型对近景和远景区域内物体的预测效果优于 DepthAnything,MonoDepth2,Lite-Mono模型.
关键词：隧道火源识别火源深度估计多模态融合两阶段训练红外图像可见光图像
分类号：TD67(矿山电工)
资助基金：国家自然科学基金(52474185)矿冶过程智能优化制造全国重点实验室开放研究基金项目(BGRIMM-KZSKL-2023-1)双一流建设提升自主创新能力项目(2022ZZCX05K03)
论文发表日期：2024-11-10
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：8( 26-33 )
英文信息