1 南京信息工程大学电子与信息工程学院,江苏 南京 210044
2 无锡学院电子信息工程学院,江苏 无锡 214105
针对光学遥感图像目标分布密集、尺度变化范围较大及小目标特征信息过少等造成目标检测精度不高、泛化能力差等问题,本文提出了一种增强小目标特征的多尺度神经网络(ESF-MNet)。首先在骨干网络中引入注意力模块构建出高效层注意力聚合结构,以增强特征提取能力;此外,在浅层特征图与颈部网络融合之前加入感受野增强模块,以捕获不同尺度的上下文信息。其次,使用GSConv构成颈部网络,减少网络层参数量,保持网络的特征提取能力,并通过基于内容感知的特征重组模块提高识别精度。最后,采用下采样率分别为4、8和16倍的三个下采样模块作为头部网络输入,来提高小目标的检测效果。为了证明该方法的有效性,在DOTA数据集和NWPU NHR-10数据集上进行实验,平均检测精度分别达78.6%和94.3%,计算复杂度为94.7 G,整体模型大小为26.2 M。该方法具备检测精度高、计算复杂度低、模型权重小等特点,能有效提高小目标的检测精度,进一步改善光学遥感图像小目标检测性能。
光学遥感图像 目标检测 感受野增强 特征融合 注意力机制
1 陆军工程大学石家庄校区电子与光学工程系,河北 石家庄 050003
2 中国人民解放军32356部队,青海 西宁 710003
针对现有基于深度学习的轻量级目标检测算法对复杂遥感场景图像中舰船目标检测精度低、检测速度慢的问题,提出了一种面向嵌入式平台的轻量级光学遥感图像舰船实时检测算法(STYOLO)。首先,针对主干网络内存访问成本较高的问题,利用高效网络架构ShuffleNet v2作为主干网络对图像进行特征提取,降低内存访问成本,提高网络并行度;其次,利用Slim-neck特征融合结构作为特征增强网络,以融合较低层级特征图中的细节信息,增强对小目标的特征响应,在多尺度信息融合区域施加坐标注意力机制,强化目标关注以提高较难样本检测以及抗背景干扰能力;最后,提出一种跨域迁移和域内迁移相结合的学习策略,减少源域与目标域的差异性,提升迁移学习效果。实验结果表明:基于光学遥感图像舰船检测公开数据集HRSC2016,与同类型快速检测算法YOLOv5s相比,所提算法的检测精度提高了2.7个百分点,参数量减少了61.77%,在嵌入式平台Jetson Nano上检测速度达到102.8 frame/s,能够有效实现对光学遥感图像中舰船目标的实时、准确检测。
光学遥感图像 舰船检测 实时检测 嵌入式平台 注意力机制 迁移学习 光学学报
2023, 43(12): 1212001
光子学报
2022, 51(12): 1210003
1 中国科学院空天信息创新研究院, 中国科学院定量遥感信息技术重点实验室, 北京100094
2 中国科学院大学, 北京100049
面向高效、高精度光学遥感图像目标检测应用,重点针对提升SSD(single shot multibox detector)模型对图像中聚集分布的小尺寸目标检测精度的难点,提出一种FFC-SSD(multi-scale feature fusion & clustering SSD)改进模型;设计目标框分组聚类(BGC)模块,采用分组聚类的方法获得更符合目标样本尺寸分布的默认目标框参数并给予小尺寸目标更多关注,以有效提升网络对目标位置信息的提取能力;设计反池化高效多尺度特征融合(MSFF)模块,以在增强模型目标特征提取能力的同时有效减小模型效率损耗。实验结果显示了所提模型对光学遥感图像目标检测的有效性与适用性,较好地实现了精度与效率的平衡,对小尺寸目标具有较高的检测精度。
图像处理 目标检测 光学遥感图像 多尺度特征融合 聚类 光学学报
2022, 42(12): 1210002
陆军工程大学石家庄校区电子与光学工程系, 河北 石家庄 050003
针对合成孔径雷达图像与光学遥感图像模式差异大、相互转换困难的问题,基于现有空间分离图像转换框架,提出了一种基于空间分离表征的循环一致性生成对抗网络(GAN)。以更深的网络层和跳跃连接完成图像风格和内容分离,通过学习内容映射关系,完成内容特征转换,而后组合目标风格特性实现图像转换。利用PatchGAN判别器,强化模型的图像细节信息生成能力,并新增目标误差损失和生成重建损失将转换任务限制为一对一映射,减少信息添加,约束生成网络。在SEN1-2、SARptical、WHU-SEN-City数据集上进行实验验证,相较于其他图像转换算法,所提方法能够有效实现两类遥感图像互转,生成图像清晰度高、细节特征完整、真实感强。
遥感 图像转换 合成孔径雷达 光学遥感图像 循环一致性生成对抗网络
1 浙江大学电气工程学院,浙江 杭州 310027
2 杭州电子科技大学计算机应用技术研究所,浙江 杭州 310018
针对复杂海面地貌、云雾背景下的光学遥感图像舰船目标检测问题,提出一种结合空域和频域视觉显著性特征的无监督舰船目标检测算法。基于图像的RGB颜色空间和ITTI模型,利用图像亮度特征图、颜色特征图、亮度特征的一阶梯度组合构建图像特征,并基于图像区域与整幅图像的协方差矩阵计算图像区域的差异性。然后由协方差矩阵之间的广义特征值构建空域显著特征图,并加入PQFT(phase spectrum of quaternion Fourier transform)模型的频域显著特征图。最后利用元胞自动机融合空域显著特征和频域显著特征。实验结果表明,所提算法检测舰船目标时的性能要优于其他常用的视觉显著算法。
机器视觉 光学遥感图像 无监督舰船检测 改进CovSal算法 PQFT算法 元胞自动机 激光与光电子学进展
2021, 58(4): 0415005
1 浙江大学电气工程学院, 浙江 杭州 310027
2 杭州电子科技大学计算机应用技术研究所, 浙江 杭州 310018
针对可见光学遥感图像港口舰船检测过程中,人造目标造成检测结果准确率低、虚警率高的问题,提出了一种基于边缘线梯度特征定位和聚合通道特征的舰船检测方法。基于多尺度多结构元素形态学滤波实现海陆分割;并结合遥感图像中港口的矩形形状特点,定义边缘梯度正切角和港口凹凸度特征以对港口进行定位,获取港口感兴趣区域集合。提取舰船目标的聚合通道特征,并通过聚合通道特征构建的样本训练库和AdaBoost算法完成分类器的训练,利用训练完成后的分类器完成舰船目标的最终判别确认。实验结果表明该算法相较于传统的HOG特征和Haar特征,检测效果良好,准确率和召回率得到较大的提升。
机器视觉 光学遥感图像 港口舰船检测 边缘线梯度特征 聚合通道特征 AdaBoost算法
为了快速准确地自动提取和识别海面舰船疑似目标, 为舰船目标精检测提供可信的数据基础, 采用了二值化特征进行舰船目标粗检测, 并根据舰船窄而长的几何特征提出了改进算法, 按照舰船目标不同的方向分别进行模板训练。实验表明, 二值化特征可以有效地提取疑似舰船目标, 并且改进算法可以在提取窗口数相同时, 提高查全率, 更利于进一步的精检测。
光学遥感图像 舰船检测 学习训练 目标特征模型 optical remote sensing image ship detection training object feature model
1 上海卫星工程研究所, 上海 200240
2 哈尔滨工业大学 空间光学工程研究中心, 黑龙江 哈尔滨 150001
3 哈尔滨师范大学 数学系, 黑龙江 哈尔滨 150025
针对全色CCD光学遥感卫星成像平台,提出了一种基于多属性融合的高分辨率图像云检测方法。首先根据云的物理特性和成像特性展开多属性分析,并提出了基于可分离度的特征选择准则来进行特征参量提取;然后针对两类样本的分布结构差异,结合LDA线性特征压缩算法,削减特征空间的维度;最后利用SVM分类器完成云检测。实验结果表明,该方法适用于高分辨率全色遥感图像的云检测,具有较高的检测概率和较低的虚警概率以及较高的算法执行效率。
云检测 光学遥感图像 多属性融合 特征提取 特征压缩 cloud detection optical remote sensing image multi-attribute fusion feature extraction feature compression