适用于铁路桥梁钢结构无人机图像缺陷检测的自适应裁剪浅层注意力网络(英文)

被引:7
作者
牟宗涵 [1 ,2 ]
秦勇 [1 ]
于重重 [3 ]
吴云鹏 [4 ]
王志鹏 [1 ]
杨怀志 [5 ]
黄永辉 [5 ]
机构
[1] 不详
[2] 北京交通大学轨道交通控制与安全国家重点实验室
[3] 不详
[4] 北京交通大学交通运输学院
[5] 北京工商大学人工智能学院
[6] 石家庄铁道大学安全工程与应急管理学院
[7] 京沪高速铁路股份有限公司
[8] 不详
关键词
铁路; 桥梁; 无人机图像; 小目标检测; 缺陷检测;
D O I
暂无
中图分类号
U446 [桥梁试验观测与检定]; TG115 [金属的分析试验(金属材料试验)];
学科分类号
摘要
目的:桥梁钢结构以及钢结构上的高强度螺栓长期受风雨侵蚀,常常会有锈蚀或缺失的情况发生,而人工巡检的效率低、危险性大且视觉盲区多。本文期望通过无人机拍摄,对铁路桥梁钢结构图像所包含的检测目标(螺母正常、螺栓正常、螺栓缺失、螺母缺失、钢表面锈蚀和钢栏杆锈蚀)进行识别和检测,以提高铁路桥梁巡检工作的精度和效率。创新点:1.提出了一种自适应图像裁剪方法,可根据图像的具体情况,自适应的调整图像的分割尺寸以及裁剪重叠区域面积,可以消除无人机拍摄距离以及焦距不固定带来的负面影响,并且提高小目标的检测效果;2.基于铁路桥梁钢结构待检测对象的特征,提出了浅层注意力网络,使模型能够更加关注待检测对象的浅层特征,从而使锈蚀区域更易于检测;3.将坐标注意力(CA)机制模块集成到浅层注意力网络模型当中,帮助网络在大范围的无人机拍摄场景下找到缺陷区域;4.将阿尔法并交比(α-IOU)损失函数集成到浅层注意力网络模型当中,提高针对铁路桥梁钢结构小数据集的训练和测试精度。方法:1.提出自适应图像裁剪策略,对无人机大尺寸图像进行处理,得到更易于网络检测出缺陷目标的小图像;2.通过对YOLO网络进行改进,得到更关注浅层特征的浅注意力网络,提高对锈蚀、缺失的检测精度;3.集成CA注意力机制和α-IOU损失函数到浅注意力网络中,提高图像检测的精度。结论:1.在小数据集中,待检测目标与输入图像的比例对最终的检测结果有明显影响;在本研究使用的数据集中,图像与主目标比例在20:1到80:1之间时,以50:1为界限,大于50:1时,精度变化较大,但是训练时间基本不变,而小于50:1时,精度基本不变,但是训练时间变化较大,因此在训练过程中,存在一个临界点,此时训练效率和测试结果最佳。2.更深层的网络会干扰小目标、少样本且简单特征对象的检测精度;对比其他策略相同但网络结构不同的检测结果,ACSANet相较于ACNet+CA+α-IOU的螺栓缺失精度提高了近10%。3.不同的注意力机制由于注意方向不同,并不一定会提高检测精度;合适的注意力机制以及损失函数可以对铁路桥梁钢结构无人机图像目标进行更好的检测,采用不合适的注意力机制会对检测产生负面效果。
引用
收藏
页码:243 / 257
页数:15
相关论文
共 16 条
  • [1] Focal and efficient IOU loss for accurate bounding box regression
    Zhang, Yi-Fan
    Ren, Weiqiang
    Zhang, Zhang
    Jia, Zhen
    Wang, Liang
    Tan, Tieniu
    [J]. NEUROCOMPUTING, 2022, 506 (146-157) : 146 - 157
  • [2] Efficient attention-based deep encoder and decoder for automatic crack segmentation
    Kang, Dong H.
    Cha, Young-Jin
    [J]. STRUCTURAL HEALTH MONITORING-AN INTERNATIONAL JOURNAL, 2022, 21 (05): : 2190 - 2205
  • [3] Real-time multiple damage mapping using autonomous UAV and deep faster region-based neural networks for GPS-denied structures
    Ali, Rahmat
    Kang, Dongho
    Suh, Gahyun
    Cha, Young-Jin
    [J]. AUTOMATION IN CONSTRUCTION, 2021, 130
  • [4] Hybrid deep learning architecture for rail surface segmentation and surface defect detection[J] . Wu Yunpeng,Qin Yong,Qian Yu,Guo Feng,Wang Zhipeng,Jia Limin.Computer‐Aided Civil and Infrastructure Engineering . 2021 (2)
  • [5] An Accurate Matching Method for Projecting Vector Data into Surveillance Video to Monitor and Protect Cultivated Land
    Shao, Zhenfeng
    Li, Congmin
    Li, Deren
    Altan, Orhan
    Zhang, Lei
    Ding, Lin
    [J]. ISPRS INTERNATIONAL JOURNAL OF GEO-INFORMATION, 2020, 9 (07)
  • [6] Hybrid pixel-level concrete crack segmentation and quantification across complex backgrounds using deep learning[J] . Dongho Kang,Sukhpreet S. Benipal,Dharshan L. Gopal,Young-Jin Cha.Automation in Construction . 2020
  • [7] Framework for automated UAS-based structural condition assessment of bridges[J] . Guido Morgenthal,Norman Hallermann,Jens Kersten,Jakob Taraben,Paul Debus,Marcel Helmrich,Volker Rodehorst.Automation in Construction . 2019
  • [8] Augmentation for small object detection[J] . Mate Kisantal,Zbigniew Wojna,Jakub Murawski,Jacek Naruniec,Kyunghyun Cho.CoRR . 2019
  • [9] SDDNet: Real-time Crack Segmentation[J] . Choi Wooram,Cha Young Jin.IEEE Transactions on Industrial Electronics . 2019
  • [10] Autonomous UAVs for Structural Health Monitoring Using Deep Learning and an Ultrasonic Beacon System with Geo-Tagging
    Kang, Dongho
    Cha, Young-Jin
    [J]. COMPUTER-AIDED CIVIL AND INFRASTRUCTURE ENGINEERING, 2018, 33 (10) : 885 - 902