一、研究背景
1.1 第一段
红外成像技术凭借其在无需可见光条件下的长距离成像能力,在夜间或视线受限环境中的多个领域显得尤为重要。
通过表示目标的热分布情况,红外成像为无人系统监控、海上目标搜寻及救援等应用提供了关键信息。
然而,在此类应用中,被观测目标常处于远距离,导致其在成像过程中表现为小尺寸目标,使得红外小目标检测对于解读这类图像至关重要。
1.2 第二段
红外小目标探测(SISTD)是一项关键任务,它将弱小目标与天空、海洋和城市结构等复杂背景分离开来。它在各个领域发挥着至关重要的作用,包括国防安全、海上监视和精确制导。然而,它带来了特殊的挑战。如图1(a)和(b)中的红色框所示,小目标只占像素的一小部分,它们的低信杂比(SCR)导致它们容易与复杂背景混合。此外,如图1(c)和(d)所示,小目标缺乏纹理信息,渲染专注于此信息的传统目标检测方法变得不太可行。同时,如图1所示,目标的形状和大小在不同的场景和背景下变化很大(5-50像素),可能会导致漏检、误报、定位不准确等。因此,SISTD带来了一个具有挑战性的问题。为了应对这些挑战,有必要设计一种方法,特别是学习形状特征,以促进红外小目标的准确检测。
1.3 第三段
红外小目标探测(IRSTD)因其强大的抗干扰性能、在复杂环境中的有效性以及在没有可见光的情况下进行远程探测的能力,在民用和军事工业中引起了广泛的兴趣。
它的应用包括国防{deng2016small}、海上救援{wu2023mtu,hu2024smpi}和遥感{sun2020infrared}。
在这些应用中,目标被远距离成像,导致它们在捕获的图像中表现为小物体。
因此,红外小目标检测在准确解释和从这些图像中提取有价值的见解方面起着关键作用。
1.4 第四段
红外小目标检测(ISTD)是红外搜索与跟踪系统中的关键技术,在遥感监视、精确制导等领域具有重要意义。
传统的成像方法经常受到雾雨天气条件的影响,使得小目标检测具有挑战性。
然而,红外成像以其独特的成像机理,即使在恶劣的条件下也能捕捉到更多的目标信息。
因此,单帧红外小目标检测(SIRST)成为了近年来小目标检测的研究热点。
然而,由于红外探测器成像距离长,目标通常占据较小的区域,提供的纹理和形状信息不足。
同时,目标通常具有低信噪比(SNR)和低对比度,因此很容易淹没在杂乱背景中。
因此,SIRST目前仍然是具有挑战性的问题。
1.5 第五段 (BAFE)
红外成像已成为各个领域的重要工具,尤其是在没有可见光的情况下需要远距离成像的场景,如夜间行动或能见度有限的环境[1]。
通过捕捉物体的热分布,红外成像可为无人系统监控[2]、海上目标搜索[3]和救援任务[4]等应用提供关键信息。
然而,在这些应用中,感兴趣的目标通常距离很远,因此在捕捉到的图像中显示为极小的物体。
因此,红外小目标检测在准确解读这些图像并从中提取有价值的信息方面发挥着关键作用,从而能够开发出能够在具有挑战性的条件下有效运行的强大而高效的系统。
4.6 第六段 (这是我写的旧版)
红外成像是一种捕获发射的热辐射的技术,它具有出色的检测能力,可以在任何光照条件下穿透雾霾或烟雾等视觉障碍物检测目标。
基于红外成像的红外小目标检测 (IRSTD) 在军事和民用应用中发挥着至关重要的作用,包括精确制导、边境安全、遥感监视和海上搜救。
在这些应用中,目标距离较远,导致其在成像过程中表现得很小,这使得 IRSTD 在从这些图像中提取有价值信息方面发挥着关键作用。
\IEEEPARstart{I}{nfrared} imaging, a technology that captures emitted thermal radiation, offers exceptional detection capabilities for detecting targets through visual obstructions, such as haze or smoke, independent of light conditions. Infrared small target detection (IRSTD), based on infrared imaging, plays a vital role in military and civilian applications, including precision guidance, border security, remote sensing surveillance, and maritime search and rescue. In these applications, the target is distant, causing it to behave as small during imaging, making IRSTD a key role in extracting valuable information from these images
4.7 第七段 (Serank)
红外成像是一种捕捉发射辐射的非侵入式热感应技术,它具有无与伦比的能力,可以不受光线条件的影响,透过雾霾和烟雾等视觉障碍辨别远处的目标[1]。
这项技术在军事和民用领域都至关重要,包括监视、边境安全和搜救任务。
因此,准确探测远程小型红外目标对这些应用至关重要[2]。
4.8 第八段
红外小目标探测(IRSTD)因其强大的抗干扰性能、在复杂环境中的有效性以及在没有可见光的情况下进行远程探测的能力,在民用和军事工业中引起了广泛的兴趣。
它的应用包括:无人系统监控、海上目标搜救、遥感监视和精确制导
然而,在这些应用中,感兴趣的目标通常距离很远,因此在捕捉到的图像中显示为极小的物体。
因此,红外小目标检测在准确解释和从这些图像中提取有价值的见解方面起着关键作用。
4.9 第九段
红外成像是一种捕获热辐射进行成像的技术,其成像不受光照条件的影响,且可穿透雾霾和烟雾等视觉障碍。
它的应用包括:无人系统监控、海上目标搜救、遥感监视和精确制导。
然而,在这些应用中,感兴趣的目标通常距离很远,因此在捕捉到的图像中显示为极小的物体。
因此,精确的红外小目标检测对这些应用至关重要。
红外成像技术是一种基于热辐射捕获的成像方法,其成像过程不受光照条件限制,并具有穿透雾霾、烟雾等视觉障碍的特性。该技术在无人系统监控、海上目标搜救、遥感监测以及精确制导等领域具有广泛的应用价值。然而,在实际应用场景中,目标物体往往距离成像设备较远,导致其在成像结果中呈现为极小尺寸的目标特征。因此,实现精确的红外小目标检测对于提升上述应用系统的性能具有重要的理论意义和实用价值。
Infrared imaging, a technique that captures thermal radiation to generate images, is capable of operating independently of lighting conditions and penetrating visual obstructions such as haze and smoke. This technology has found extensive applications in unmanned system monitoring, maritime search and rescue, remote sensing surveillance, and precision guidance systems. However, in practical scenarios, targets of interest are often situated at considerable distances, resulting in their representation as minuscule objects within the captured imagery. Consequently, the accurate detection of infrared small targets is of paramount importance for enhancing the efficacy of these systems, offering both theoretical advancements and practical benefits.
4.10 完整:
Infrared imaging, a technique that captures thermal radiation to generate images, is capable of operating independently of lighting conditions and penetrating visual obstructions such as haze and smoke. This technology has found extensive applications in unmanned system monitoring, maritime search and rescue, remote sensing surveillance, and precision guidance systems. However, in practical scenarios, targets of interest are often situated at considerable distances, resulting in their representation as minuscule objects within the captured imagery. Consequently, the accurate detection of infrared small targets is of paramount importance for enhancing the efficacy of these systems, offering both theoretical advancements and practical benefits.
Although remote targets can be effectively detected using infrared imaging, several common challenges hinder the precise detection of small targets, which may result in missed detection, false alarm (FA), inaccurate localization, etc.
- Small and Dim: Due to the long imaging distance, IR targets are small and typically exhibit a low signal-to-clutter ratio (SCR), rendering them prone to being overwhelmed by substantial noise and background clutter.
- Scarcity of Intrinsic Target Features: IR small targets appear inconspicuous in the image, lacking sufficiently prominent features to differentiate them from visually similar false alarms when relying solely on localized target information.
- Similar Background Distractions: Infrared images are often plagued by numerous background interferences, resembling the targets of interest. These disturbances, such as noise points and hot spots, also manifest as small spots, making it nearly impossible to distinguish them from actual targets based solely on localized visual comparison.
二、红外小目标的特点
2.1 第一段
- Serank
- 缺乏显著特征:小目标往往缺乏足够的显著特征,仅使用局部目标信息很难将其与视觉上相似的假警报区分开来。
- 低信杂比:红外小目标在杂波背景下对比度较低,其信杂比较小,使得识别难度较大,存在较大的检测障碍。
2.2 第二段
- SCTransNet
- 弱小:由于远程成像,红外目标很小,通常表现出较低的信杂比,使其容易沉浸在重噪声和背景杂波中。
- 无特征:热图像缺乏目标的颜色和纹理信息,相机对焦不精确会导致目标模糊。这些因素对IRSTD特征提取技术的设计提出了特殊的挑战。
- 形状不确定:红外目标的尺度和形状在不同场景下变化很大,这给检测问题带来了很大的挑战。
2.3 第三段
- DNANet
- 小: 由于成像距离较远,红外目标一般较小,在图像中从一个像素到几十个像素不等。
- 微小: 红外目标的信噪比(SCR)通常较低,容易淹没在严重的噪声和杂波背景中。
- 无形状: 红外小目标的形状特征有限。
- 易变: 不同场景下红外目标的大小和形状变化很大。
2.4 第四段
- BAFE
- 内在目标特征稀缺:最大的挑战源于内在目标特征的匮乏。与拥有丰富视觉线索(如外观、纹理和结构)的一般物体不同,红外小目标尺寸极小,在图像中只是不起眼的斑点。这种“视觉贫乏”使得基于目标特定特征的识别和定位方法在很大程度上无效。
- 大量相似的背景干扰物:红外图像经常受到大量背景干扰物的困扰,这些干扰物与感兴趣的目标非常相似。这些干扰物(如噪声点和热点)也表现为斑点,因此几乎不可能根据局部视觉比较将它们与真正的目标区分开来。
三、国内外研究现状
3.1 第一段
素材1:传统的单红外小目标检测(SISTD)方法可以分为三类,包括基于滤波器的方法、基于人类视觉系统(HVS)的方法以及基于低秩矩阵(LRM)的方法。基于滤波器的方法[9]–[12]采用专门设计的滤波器从背景中提取小目标。虽然它们在滤除平滑背景杂波方面效果显著,但在遇到不同强度的噪声和背景干扰时,其性能会显著下降。基于人类视觉系统的方法[6], [7], [13]–[15]依赖于目标与背景之间的局部明暗对比差异,使其特别适合检测相对亮度较高的小目标。然而,在背景存在强亮噪声的情况下,它们可能会导致较高的虚警率。基于低秩矩阵的方法[16]–[20]将红外图像视为低秩稀疏矩阵,并引入低秩矩阵重构来分离目标与背景。由于目标的强度相对于背景的强度并不显著,这些方法在检测各种形状的目标时表现不佳。总体而言,在处理复杂场景时,传统方法严重依赖手动特征,这使得它们难以应对复杂场景。
3.2 第二段
素材2:传统的红外小目标检测(IRSTD)方法可以分为三大类:背景抑制方法、基于人类视觉系统(HVS)的方法以及基于低秩矩阵(LRM)的方法。背景抑制方法[8–18]通过专门设计的滤波器将红外小目标从背景中分离出来。基于人类视觉系统的方法[19–26]通过识别背景中的局部明暗差异来检测小目标。基于低秩矩阵的方法[27–30]通过将红外图像分解和重构为稀疏矩阵来分离小目标与背景。然而,传统方法的有效性有限,且缺乏从数据集中学习或动态适应不同环境条件的能力。
3.3 第三段
素材3:目前,红外小目标检测(IRSTD)方法可以分为基于模型的方法和基于数据的方法。
基于模型的方法
基于模型的方法主要包括以下三种方法:
基于滤波器的方法:例如Tophat滤波器,通过增强目标在复杂背景中的可见性,同时抑制背景噪声。
基于人类视觉系统(HVS)的方法:例如局部对比度测量(LCM)和多块对比度测量(MPCM),利用人类视觉感知机制来增强局部信息。
基于低秩矩阵分解和重构的方法:例如红外小块图像模型(IPI)和重加权红外小块张量(RIPT),通过低秩矩阵分解来分离小目标和背景。
然而,这些基于模型的方法通常需要手动设置参数,且在复杂场景下适应性较差。
3.4 第四段
素材4:传统的红外小目标检测(IRSTD)方法可以分为三大类:基于背景抑制(BS-based)、基于人类视觉系统(HVS-based)和基于低秩矩阵(LRM-based)的方法。基于背景抑制的方法[^liu2023image^]使用专门设计的滤波器来提取小红外目标。基于人类视觉系统的方法[^liu2023image^]通过增强目标的局部信息来识别小目标。基于低秩矩阵的方法[^liu2023image^]通过将红外图像分解并重构为稀疏矩阵来检测小目标。然而,这些传统方法在从数据集中学习或根据不同的环境条件动态调整参数方面的能力有限,导致它们在复杂场景下的性能表现欠佳。
3.5 第五段
要解决这一问题,就必须从整体角度出发,整合多尺度视觉分析,以区分真假目标[4]。为此,研究领域出现了大量深度学习策略,这些策略优先考虑融合多级上下文信息[5],旨在弥合详细目标特征与更广泛场景上下文之间的差距。最近的发展包括非对称语境调制技术,这种技术可以丰富语义理解,并在更深的网络层保留细节[6]。此外,还有一些策略利用密集的互连结构来保持目标的完整性,从而促进跨尺度的稳健特征交互[7]。
3.6 第六段
得益于这些编码器、解码器和长距离 SK 的框架,非对称上下文调制(ACM)网络 [14] 初步证明了跨层特征融合在保留红外目标特征方面的有效性。这是通过使用非对称的自上而下和自下而上结构双向聚合高层语义信息和低层细节来实现的。随后,特征融合策略在 IRSTD 任务中被广泛采用[18]、[19]、[20]、[21]。最近有几种方法通过改进 SK,促进了有益特征向解码器组件的转移 [22], [23]。受嵌套结构[24]的启发,DNA-Net[15]开发了一个密集嵌套的交互模块,以促进高层和低层特征之间的渐进交互,并自适应地增强特征。此外,还有一些方法侧重于开发更有效的编码器和解码器[25]、[26]。例如,UIU-Net [16] 在 U-Net 中嵌入更小的 U-Net,以学习目标的局部对比度信息,并执行交互式交叉注意(IC-A)进行特征融合。
尽管取得了令人满意的结果,但上述基于卷积神经网络(CNN)的方法缺乏对目标的综合属性进行编码的能力,从而丢失了目标的鉴别特征。为解决这一问题,MTU-Net [17] 采用了多级视觉变换器(ViT)-CNN 混合编码器,利用所有编码特征之间的空间相关性进行上下文信息聚合。然而,简单的空间 ViT-CNN 混合模块不足以理解图像的全局语义,因此误报率较高。