基于多模态遥感影像的边缘感知引导显著性检测
作者:
作者单位:

1.中国石油大学(北京),信息科学与工程学院,北京 102249;2.中国石油大学(北京),石油数据挖掘北京市重点实验室,北京 102249;3.北京空间机电研究所,北京 100094

作者简介:

连远锋(1977-),男,博士,副教授,主要研究方向为计算机视觉及遥感图像处理技术.email:lianyuan feng@cup.edu.cn.
石 旭(1998-),男,在读硕士研究生,主要研究方向为遥感图像处理及显著性检测.
江 澄(1985-),男,博士,高级工程师,主要研究方向为高光谱遥感建模与仿真、遥感数据预处理及定量应用.

通讯作者:

基金项目:

国家自然科学基金资助项目(61972353);中国石油天然气集团有限公司-中国石油大学(北京)战略合作科技专项资助项目(2006A10401006)

伦理声明:



Edge aware guidance saliency detection based on multi-modal remote sensing image
Author:
Ethical statement:

Affiliation:

1.Department of Computer Science and Technology;;2.Beijing Key Laboratory of Petroleum Data Mining,China University of Petroleum,Beijing 102249,China;;3.Beijing Institute of Space Mechanics & Electricity,Beijing 100094,China

Funding:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
    摘要:

    针对多模态遥感影像显著性检测鲁棒性差和检测精确度不佳等问题,提出一种基于多模态边缘感知引导的显著性检测方法,该方法主要由多模态遥感影像显著检测主干网络、跨模态特征共享模块和边缘感知引导网络构成。通过在特征提取主干网络中加入跨模态特征共享模块,使得不同模态间特征通过共享交互实现协同增强,并且抑制具有缺陷的特征信息。基于边缘感知引导网络,通过边缘图监督模块来检测边缘特征的有效性,从而生成准确边界。在3种显著目标检测遥感图像数据集上进行实验,平均的Fβ、平均绝对误差(MAE)、Sm分数分别为0.917 6,0.009 5和0.919 9。实验结果表明,提出的多模态边缘感知引导网络(MEGNet)适用于在多模态场景中进行显著性检测。

    Abstract:

    To address the problems of poor robustness and poor detection accuracy of multimodal remote sensing image saliency detection, this paper proposes a method based on the novel and efficient Multi-modal Edge aware Guidance Network(MEGNet), which mainly consists of a salient detection backbone network for multi-modal remote sensing images, a cross-modal feature sharing module and an edge aware guidance network. First of all, a Cross-modal Feature Sharing Module(CFSM) is used during feature extraction for remote sensing image pairs, which encourages different modalities to complement each other in the feature extraction process and suppresses the influence of defective feature data from different modalities. Secondly, based on the Edge Aware Guidance Network(EAGN), the effectiveness of edge features is detected through the edge map supervision module and the final salient detection map will have clear boundaries. Finally, experiments are carried out on three kinds of saliency objects detection remote sensing image datasets. The average Fβ, Mean Absolute Error(MAE) and Sm scores are 0.917 6, 0.009 5 and 0.919 9, respectively. The experimental results show that the proposed MEGNet is suitable for saliency detection in multi-modal scenes.

    参考文献
    相似文献
    引证文献
引用本文

连远锋,石旭,江澄.基于多模态遥感影像的边缘感知引导显著性检测[J].太赫兹科学与电子信息学报,2023,21(3):360~370

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
历史
  • 收稿日期:2022-11-01
  • 最后修改日期:2022-12-26
  • 录用日期:
  • 在线发布日期: 2023-03-31
  • 出版日期: