基于异源图像融合的目标检测技术研究综述
作者:
作者单位:

1南京理工大学 计算机科学与工程学院,江苏 南京 210094;2南京电子技术研究所,江苏 南京 210039;3雷达探测感知全国重点实验室,江苏 南京 214000;4北京市遥感信息研究所,北京 100011

作者简介:

司浩田(2001-),男,在读博士研究生,主要研究方向为深度学习多模态.email:224106024960@njust.edu.cn.
李澜宇(1991-),男,博士,高级工程师,主要研究方向为遥感影像智能解译.
李元吉(1988-),男,博士,正高级工程师,主要研究方向为雷达系统设计与数据处理.
蒋庆远(1991-),男,博士,副教授,主要研究方向为多模态学习.
杨杨(1991-),男,博士,教授,主要研究方向为持续学习与多模态学习.
余晓刚(1976-),男,博士,研究员,主要研究方向为遥感信息处理.

通讯作者:

基金项目:

国家自然科学基金资助项目(62293552;U22B2059)

伦理声明:



A survey on object detection techniques based on heterogeneous image fusion
Author:
Ethical statement:

Affiliation:

1School of Computer Science and Engineering,Nanjing University of Science and Technology,Nanjing Jiangsu 210094,China;2Nanjing Research Institute of Electronics Technology,Nanjing Jiangsu 210039,China;3National Key Laboratory of Radar Detection and Searching,Nanjing Jiangsu 214000,China;4Beijing Institute of Remote Sensing Information,Beijing 100011,China

Funding:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
    摘要:

    目标检测技术通过实时定位和准确分类关键目标,显著提升智能系统决策效率,在交通监控、工业质检、医疗影像分析等领域发挥着至关重要的作用。基于异源图像融合的目标检测技术通过整合合成孔径雷达(SAR)、红外与可见光等多模态数据,为目标检测提供更全面、鲁棒的特征表达,检测性能优于单模态方法。本文围绕目标检测任务,系统调研了异源图像融合策略及其适配不同检测框架的技术路线。首先,介绍了点级、区域级、特征级和多层次级的异源图像融合策略,并对其技术特点进行分析。其次,分析了基于异源图像融合的目标检测技术在单阶段与两阶段检测框架中的应用流程,以及两种框架的技术优势与局限性。再次,探讨并总结了能够同时优化融合任务与检测任务的先进方法。最后,介绍了基于异源图像融合的目标检测技术常用的数据集与评估指标,并展望了该技术在智能交通、工业检测、智慧医疗等领域的应用前景。

    Abstract:

    Object detection technology enhances the decision-making efficiency of intelligent systems through real-time localization and accurate classification, playing a vital role in traffic monitoring, industrial inspection, and medical image analysis. Heterogeneous image fusion-based detection integrates multimodal data such as Synthetic Aperture Radar(SAR), infrared, and visible images, effectively overcoming single-modality limitations and providing more comprehensive feature representations, thereby achieving superior detection performance. This paper systematically investigates heterogeneous image fusion strategies for object detection and their adaptation to various detection frameworks. Specifically, it introduces fusion strategies at the point, region, feature, and multi-level, analyzes their technical characteristics, and examines their application within single-stage and two-stage detection frameworks along with their respective advantages and limitations. Furthermore, it synthesizes state-of-the-art approaches for joint optimization of fusion and detection. Finally, commonly used datasets and evaluation metrics are presented, along with promising application prospects in intelligent transportation, industrial inspection, and smart healthcare.

    参考文献
    相似文献
    引证文献
引用本文

司浩田,李澜宇,李元吉,等.基于异源图像融合的目标检测技术研究综述[J].太赫兹科学与电子信息学报,2026,24(8):876~891. DOI:10.11805/TKYDA2025189.
Si Haotian, Li Lanyu, Li Yuanji, et al. A survey on object detection techniques based on heterogeneous image fusion[J]. Journal of Terahertz Science and Electronic Information,2026,24(8):876-891. DOI:10.11805/TKYDA2025189.

复制
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
历史
  • 收稿日期:2025-06-12
  • 最后修改日期:2026-01-23
  • 录用日期:
  • 在线发布日期: 2026-09-03
  • 出版日期:
关闭