作者单位
摘要
长春理工大学电子信息工程学院,吉林 长春 130012
针对彩色图像引导的深度图像超分辨率重建算法中存在的纹理转移和深度流失的问题,提出一种基于双特征融合引导的深度图像超分辨率重建网络(DF-Net)。为了充分利用深度和强度特征的关联性,在网络模型的深度恢复重建部分采用双通道融合模块(DCM)和双特征引导重建模块(DGM)。利用输入金字塔结构提取深度信息和强度信息的多尺度特征:DCM基于通道注意力机制对深度特征和强度特征进行通道间的特征融合与增强;DGM将深度、强度特征自适应选择融合后实现重建的双特征引导,增加了深度特征的引导作用,改善了纹理转移和深度流失的问题。实验结果表明,所提方法的峰值信噪比(PSNR)和均方根误差(RMSE)优于RMRF、JBU和Depth-Net等方法,尤其4×超分辨率重建结果的PSNR值比其他方法平均提升6.79 dB,RMSE平均下降0.94,取得了较好的深度图像超分辨率重建效果。
图像处理 图像超分辨率重建 卷积神经网络 深度图像 特征融合 通道注意力 
激光与光电子学进展
2024, 61(8): 0837007
作者单位
摘要
上海工程技术大学电子电气工程学院,上海 201620
卷积神经网络已在图像超分辨率领域得到广泛应用,Transformer近年来在该类图像处理任务中的扩展更是具有里程碑的意义,然而这些大型网络具有过多的参数量和计算量,其在部署和应用上存在很大局限性。考虑到上述发展现状,提出一种基于交错组卷积与稀疏全局注意力的轻量级图像超分辨率重建网络,该网络引入了以交错组卷积为主的特征提取模块,对Transformer的多头自注意力机制进行优化,设计了一种稀疏全局注意力机制以增强特征学习能力,并提出了一种多尺度特征重构模块来提高重建效果。实验结果表明:相比其他几种基于深度神经网络的方法,所提方法的PSNR、SSIM、参数量、计算量等性能指标都表现较好。而与基于Transfomer的方法相比,所提方法在PSNR、SSIM指标上平均提高0.03、0.0002,在参数量、计算量、运行时间上平均降低2.66×106、130×109、930 ms。
图像超分辨率 交错组卷积 注意力机制 轻量化网络 Transformer 多尺度特征重建 
激光与光电子学进展
2024, 61(4): 0411003
作者单位
摘要
西安建筑科技大学 理学院,陕西 西安 710055
针对目前图像超分辨率重建算法中所存在的特征信息提取不充分、重建图像细节信息模糊等问题,提出了一种多尺度双阶段网络来实现图像的超分辨率重建。首先,考虑到单尺度卷积层会出现特征信息提取不充分的现象,故而以多尺度卷积层为大体框架,设计网络模型;其次,考虑到重建后的图像效果,将整体网络分为2个阶段,第1阶段根据输入的低分辨率图像进行特征信息的提取和重建,第2阶段对重建后的图像进行更深一步的特征细化,从而提高重建图像的视觉效果;整体网络中还引入了跳跃连接和注意力模块,以加强特征信息的有效传播;最后,以数据集Set5、Set14、Urban100、BSDS100和Manga109作为测试集展开实验,峰值信噪比和结构相似度作为图像质量的评价指标。实验结果表明,二者的值相比以往均有所提高,且重建图像视觉效果较好。因此,该算法在客观评价和主观视觉上都取得了较好的结果。
图像超分辨率重建 多尺度 双阶段 跳跃连接 注意力模块 image super-resolution reconstruction multi-scale two stage jump connection attention module 
应用光学
2023, 44(6): 1343
杜均森 1郭杰龙 2,3,*俞辉 2,3魏宪 2,3
作者单位
摘要
1 福州大学 先进制造学院,福建 泉州 362000
2 中国科学院 福建物质结构研究所,福建 福州 350108
3 中国科学院 海西研究院 泉州装备制造研究中心,福建 泉州 362000
针对现有图像超分辨率重建算法的重建图像仍存在高频信息缺失、噪点增多问题,本文提出了一种基于卷积稀疏编码与生成对抗网络的图像超分辨率重建模型。首先,利用卷积网络实现稀疏编码并获取图像稀疏表示,充分利用图像的先验信息,有效避免重建图像高频信息缺失和噪点增多的问题;在得到低分辨率图像的稀疏表示后,通过重建模块对稀疏表示进行重建得到超分辨率图像;随后,鉴别器对重建图像进行鉴别,缓解由PSNR主导的算法导致重建图像趋于平滑的问题。在不断对抗训练后,最后的重建图像具有更好的视觉效果。本文在Set5、Set14、BSD100和Urban100通用测试数据集上进行2倍和4倍的超分辨率重建实验,并与Bicubic、SRGAN、EDSR和ESRGAN对比。与ESRGAN方法相比,本文模型在4个数据集上平均PSNR提升约0.702 8 dB,平均SSIM提升约0.047,平均LPIPS提升了0.016。实验结果表明,所提出的模型具有较强的竞争力,能够恢复更多的细纹理细节且具有更好的清晰度。
图像处理 图像超分辨率 稀疏表示 生成对抗网络 image processing image super resolution sparse representation generative adversarial network 
液晶与显示
2023, 38(10): 1423
傅扬伟 1,2张进 1,2,3,*孙珍惜 1,2张瑞 1,2[ ... ]夏豪杰 1,2,3
作者单位
摘要
1 合肥工业大学 仪器科学与光电工程学院,安徽合肥230009
2 测量理论与精密仪器安徽省重点实验室,安徽合肥30009
3 教育部安全关键工业测控技术工程研究中心,安徽合肥20009
微器件广泛应用于电子工业。由于衍射效应,微器件的物理边缘与光学边缘不一致,这给检测和测量带来了挑战。为提高微目标检测与测量精度,本文将图像超分辨率重建与目标测量结合,提出了一种基于边缘增强的图像超分辨率重建算法并搭建了对应的测量系统。首先提出了一种新的图像超分辨率重建质量评价参数,证明了图像超分辨率重建提高目标测量精度的可行性。针对目标边缘,将通道注意力机制引入网络,增强了网络对图像边缘的重建能力。最后,设计并搭建了目标测量系统,并进行了实验。结果表明:在公开数据集上,本文算法能取得更高的峰值信噪比(PSNR)和结构相似性(SSIM)等客观指标值;在实际测量中,本文算法可将原有测量系统极限分辨率提高25.9%,目标测量精度平均提高51.6%。本文研究为工业生产中的微目标检测和测量提供了一个潜在的发展方向。
深度学习 图像超分辨率 计算机视觉 边缘检测 亚像素 deep learning image super-resolution computer vision edge detection subpixel 
光学 精密工程
2023, 31(6): 962
朱雯青 1,2,3,*张宁 1,2,3李争 1,2,3刘鹏 1,3汤心溢 1,3
作者单位
摘要
1 中国科学院上海技术物理研究所, 上海 200083
2 中国科学院大学, 北京 100049
3 中国科学院红外探测与成像技术重点实验室, 上海 200083
红外与可见光图像融合一直是图像领域研究的热点, 融合技术能弥补单一传感器的不足, 为图像理解与分析提供良好的成像基础。 因生产工艺以及成本的限制, 红外探测器的分辨率远低于可见光探测器, 并在一定程度上因源图像分辨率的差异阻碍了实际应用。 针对红外与可见光图像分辨率不一致的问题, 提出了用于红外图像超分辨率重建与融合的多任务卷积网络框架, 应用于多分辨率图像融合。 在网络结构方面, 首先设计了双通道网络分别提取红外与可见光特征, 使算法不受源图像分辨率的限制; 其次提出了特征上采样模块, 先用双线性插值方法增加像素个数, 再通过多层感知器精细化拟合像素平滑空间与高频空间的映射关系, 无需重新训练模型即可实现任意尺度的红外图像上采样; 接着将线性注意力引入网络, 学习特征空间位置间的非线性关系, 抑制无关信息并增强网络对全局信息的表达。 在损失函数方面, 提出了梯度损失, 保留红外与可见光图像中绝对值较大的滤波器响应值, 并计算该值与重建的融合图像响应值的Frobenius范数, 无需理想的融合图像作为真值监督网络学习就能生成融合图像; 此外, 在梯度损失、 像素损失的共同作用下对多任务模型进行优化, 可以同时重建融合图像和高分辨率红外图像。 算法在RoadScene数据集上进行训练, 与其他4种相关算法在TNO数据集上进行对比, 主观性能上该方法可以输入任意分辨率的源图像, 融合图像红外目标突出、 可见光细节纹理丰富, 在源图像分辨率相差较大时能重建特征清晰的高分辨率红外图像, 模型泛化性能强; 客观性能上在信息熵、 差异相关性总量、 空间频率等多个评价指标上表现优异, 结果表明重建的融合图像信息丰富、 信息转化率高、 清晰度高, 验证了算法的有效性。
红外与可见光融合 多分辨率图像融合 线性注意力 梯度损失 红外图像超分辨率 Infrared and visible image fusion Multi-resolution image fusion Linear attention Gradient loss Infrared image super-resolution 
光谱学与光谱分析
2023, 43(1): 289
袁艳 1,2刘安琪 1,2苏丽娟 1,2,*
作者单位
摘要
1 北京航空航天大学 仪器科学与光电工程学院,北京 100191
2 精密光机电一体化技术教育部重点实验室,北京 100191
快照式光谱成像技术可以单次曝光成像获得目标辐射的二维空间分布和一维光谱信息,在动态目标探测与识别中具有显著优势。本文总结了快照式光谱成像技术的空谱调制投影原理,并从丰富探测信息量的角度出发,在技术原理和数据处理两个层面分析了其主要发展趋势。在技术原理层面,扩展目标辐射探测维度,实现多维信息实时探测是光学探测技术发展的重要趋势,重点介绍了快照式光谱立体成像技术;在数据处理层面,提高光谱图像空间分辨率,对于提升快照式光谱成像技术的应用效果具有重要的实际意义。在此基础上,对快照式光谱成像技术的未来发展方向进行了展望。
快照式光谱成像 多维信息调制 立体成像 数据处理 图像超分辨 Snapshot spectral imaging Multidimensional information modulation Volumetric imaging Data processing Image super-resolution 
光子学报
2022, 51(7): 0751404
作者单位
摘要
1 陕西科技大学 电子信息与人工智能学院,陕西 西安 710021
2 中国科学院 国家天文台,北京 100101
3 西安石油大学 理学院,陕西 西安 710065
随着生成对抗网络在图像超分辨(SR)领域的应用,一些感知驱动的SR方法可以恢复出纹理细节更加丰富的SR图像,有效地缓解了由PSNR主导的SR方法导致重建图像趋于平滑的问题。然而梯度信息作为图像纹理的一种重要表现形式,鲜有SR方法能准确、高效地利用。为此,提出一种基于梯度感知的图像超分辨(GASR)算法,可以更准确地利用梯度信息。一方面,使用梯度域的特征图作为作用在图像域特征图上的卷积核,有效地避免了不同域特征图串联所带来的域冲突问题;另一方面,通过对卷积核尺寸等设计细节的调整使两个分支对应位置所输出的图像域与梯度域特征图的感受野一致。此外,由于实际应用对网络轻量化需求的提高,提出的GASR算法还有效降低了参数量和计算量。与同样利用梯度信息的SPSR相比,GASR最终以约1/6的参数量与1/10的计算量取得了与其相近的性能。在Set14数据集上,LPIPS与PSNR分别提升了0.002 2与0.217。实验结果验证了GASR可以在纹理生成与图像平滑度之间取得一个很好的平衡,视觉化效果也验证了GASR不仅可以准确地恢复SR图像,而且在一定程度上缓解了杂乱纹理的生成。
图像超分辨率 梯度 深度学习 生成对抗网络 image super-resolution gradient deep learning generative adversarial network 
液晶与显示
2022, 37(10): 1334
作者单位
摘要
江西理工大学信息工程学院,江西 赣州 341000
单幅图像超分辨率重建在众多领域应用广泛,然而现有算法大多通过扩展卷积神经网络深度和宽度来提取更多特征细节,导致算法计算复杂度的提高和模型参数量的增大。为解决上述问题,提出一种自适应残差注意力的轻量级超分辨率网络算法。首先通过改进坐标注意力网络,生成了关注高频位置信息的注意力特征图;接着将改进的自适应残差注意力信息提取模块和坐标注意力模块双支路并行连接,使输出的特征信息包含更多图像细节;同时采用多尺度上采样方法,使训练得到的网络模型(单次训练)一次输出多个不同尺度的超分辨率图片。通过和经典的轻量级超分辨率算法比较,所提算法得到的4倍重建图片在4个公共数据集上的平均峰值信噪比(PSNR)提高了1.06 dB,模型参数量减少了59%,图像观感更为清晰,包含更多高频细节。
图像超分辨率 轻量级 注意力机制 卷积神经网络 残差学习 
激光与光电子学进展
2022, 59(16): 1610007
Author Affiliations
Abstract
1 Instrument Science and Technology, Harbin Institute of Technology, Harbin 150001, China
2 Research Center of Laser Fusion, China Academy of Engineering Physics, Mianyang 621900, China
In-situ laser-induced surface damage inspection plays a key role in protecting the large aperture optics in an inertial confinement fusion (ICF) high-power laser facility. In order to improve the initial damage detection capabilities, an in-situ inspection method based on image super-resolution and adaptive segmentation method is presented. Through transfer learning and integration of various attention mechanisms, the super-resolution reconstruction of darkfield images with less texture information is effectively realized, and, on the basis of image super-resolution, an adaptive image segmentation method is designed, which effectively adapts to the damage detection problems under conditions of uneven illumination and weak signal. An online experiment was carried out by using edge illumination and the telescope optical imaging system, and the validity of the method was proved by the experimental results.
laser optic damage image super-resolution image segmentation 
Chinese Optics Letters
2022, 20(7): 071101

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!