光学学报, 2020, 40 (14): 1405003, 网络出版: 2020-07-23   

基于Boltzmann函数刃边拟合的光栅成像系统点扩展函数模型 下载: 934次

Point Spread Function Model of Grating Imaging System Based on Boltzmann Function Edge Fitting
作者单位
1 广西大学电气工程学院, 广西 南宁 530004
2 广西大学物理科学与工程技术学院, 广西 南宁 530004
摘要
为了提高平面光栅成像系统的点扩展函数(PSF)提取准确度,构建PSF模型,提出一种基于Boltzmann函数的刃边函数拟合方法。构建以入射角为自变量的双曲线型变化PSF模型,揭示了光栅成像系统PSF的分布规律。最后,采用Lucy-Richardson算法对不同模糊程度的图像进行复原,并对复原后的图像进行质量评价,其中灰度平均梯度(GMG)提升均在60.2%以上,结构相似度(SSIM)提升均在66.5%以上。对比不同拟合方法的复原效果,结果表明,所提方法在对像差较大的图像进行复原时,效果明显优于其他同类方法,建立的PSF模型也可以准确地表现光栅成像系统的特性。
Abstract
To improve the accuracy of the point spread function (PSF) extraction of planar grating imaging systems and develop PSF models, a fitting method of edge spread function based on the Boltzmann function is proposed. A hyperbolic PSF model with the incident angle as the independent variable is constructed, and then the PSF distribution rules of the grating imaging systems are obtained. Finally, the Lucy-Richardson algorithm is employed to restore images with different degrees of blur, and the quality of the restored images is evaluated. A grayscale mean gradient (GMG) improvement of above 60.2% and structural similarity (SSIM) improvement of above 66.5% are obtained. In a comparison with the restoration effects of different fitting methods, the proposed method shows better image restoration for large aberrations than other similar methods. The developed PSF model can also accurately represent the characteristics of grating imaging systems.

1 引言

由于受外在条件的影响,光学成像系统难免会有像差。部分光学系统可以通过优化光路设计来消除像差影响,而对于无法通过光学设计来消除像差的光学系统,可以采用图像复原方法[1-4]。此类方法主要通过获取像差图像(即退化图像)的点扩展函数(PSF)来对像差造成的模糊图像进行反向卷积复原,从而获得清晰的图像。点扩展函数的提取是步骤中的关键,而刃边函数(ESF)的拟合是点扩展函数提取过程中尤为关键的一环。

目前,关于刃边拟合函数的研究取得了丰富的研究成果。谢丁杰等[5]为了弥补卡塞格林光学系统成像质量的损失,运用调制传递函数补偿(MTFC)技术,采用倾斜刃边法提取点扩展函数,对退化图像进行复原,取得了良好效果。杨利红等[6]对不同拟合模型进行对比实验,发现Gauss刃边拟合函数可以有效地缓解遥感相机成像造成的图像模糊现象。方明等[7]提取基于最优费米函数的点扩展函数,通过质量评价算法来决定费米拟合次数,对刃边曲线进行多次拟合,提高了遥感图像的点扩展函数估算精度。上述方法都适用于遥感成像系统,图像模糊程度相对较低。但光栅成像系统图像存在因像差大而刃边部分像素跨度较大的情况,此时传统的刃边拟合函数方法并不适用;另一方面,基于成像系统建立的点扩展函数模型不具有光栅成像系统的特性。光栅成像系统的点扩展函数易受入射角影响,但其点扩展函数模型有别于显微透镜成像的对顶双锥体[8-11],需要探寻符合光栅成像系统的点扩展函数模型。

针对以上问题,本文提出了一种基于Boltzmann函数的刃边拟合方法。通过提取光栅所形成图像中的刃边部分,采用Boltzmann函数对刃边部分进行刃边拟合,对像差较大的图像进行点扩展函数提取,可有效提高提取精度和图像复原质量;采用双曲函数对点扩展函数的轴向水平剖面的能量分布进行描述,在光栅成像系统中,构建以入射角为自变量的点扩展函数模型。

2 光栅系统成像特征

平面等周期光栅对物体成的虚像一般都存在像差,光栅的像差主要表现为像散,而像散程度受物光的入射角影响。仅当光栅的某级衍射光以最小偏向角入射时,该衍射光形成的物体虚像无像散,此时子午像距和弧矢像距相等[12],所看到的图像是清晰的;当入射光角度偏离最小偏向角时,图像变得模糊,其中子午像距基本不变,而弧矢像距快速变化。

搭建的光路如图1所示,其中S是波长λ为589 nm的钠光光源;T为依附在毛玻璃上的可透光“#”形目标物;G为平面等周期透射光栅,其空间频率为1000 L/mm,光栅刻线方向垂直于水平面;物距d为330 mm;θ为光入射角(顺时针旋转角度为负);P为物体经光栅衍射后所成的虚像位置;CCD为相机图像采集装置。

图 1. 实验光路示意图

Fig. 1. Diagram of experimental light path

下载图片 查看所有图片

将相机聚焦于光栅一级衍射光在最小偏向角(此时入射角与衍射角相等,θ=-18°)下的物体虚像,保持相机焦距不变,改变光入射角θ,以2°为间隔拍摄序列图像,结果如图2所示。可以看出,除了在最小偏向角下拍摄的图像外,其余角度下的图像模糊,主要是物体竖向边缘不清晰,且角度偏离最小偏向角越大,图像模糊度越大。

图 2. 部分入射角下光栅所成图像

Fig. 2. Images formed by grating at partial incident angles

下载图片 查看所有图片

3 刃边拟合与点扩展函数模型建立

为了对模糊图像进行复原,需要求取其PSF。采用Boltzmann函数对刃边函数进行拟合,进而构建更精确的PSF。

3.1 刃边拟合函数对比

图3(a)为入射角为-34°时所成图像的刃边部分,对其预处理后,分别采用Gauss函数的积分形式、Hyperbolic函数、Boltzmann函数对预处理后的结果进行刃边拟合。其中Boltzmann函数模型为

B(x)=A1-A2expx-xEk+1+A2,(1)

式中:A1A2分别为拟合曲线的起始值和终止值;xE为水平方向的刃边点位置,此参数和刃边图像的截取相关;k为刃边过渡程度的参数,数值越小,过渡越快,刃边跨度越小。拟合结果如图3(b)、(c)所示,可以看出,Boltzmann函数拟合的刃边曲线数据在刃边两端和过渡部分都是最接近原始采样数据的。

图 3. 刃边图像和不同函数拟合的效果。(a)刃边图像;(b)不同函数的拟合结果;(c)局部放大

Fig. 3. Edge image and fitting effects of different functions. (a) Edge image; (b) fitting results of different functions; (c) local enlargement

下载图片 查看所有图片

采用和方差(SSE)、确定系数(R-square)、方均根误差(RMSE)对拟合优度进行评价。其中SSE和RMSE值越小,误差越小,拟合效果越好;R-square值越接近1,说明误差越小。表1为不同函数的拟合优度,可以看出,Gauss函数的积分形式在刃边跨度过大时无法有效拟合ESF,而Boltzmann函数的拟合优度在绝大多数情况下优于Hyperbolic函数,因此Boltzmann函数可以有效地拟合具有不同跨度的ESF,降低求取PSF时的误差。

表 1. 不同函数对ESF的拟合优度

Table 1. Fitting goodness of different functions on ESF

θ /(°)GaussHyperbolicBoltzmann
SSER-squareRMSESSER-squareRMSESSER-squareRMSE
40.00760.99880.01270.00470.99910.0091
20.01800.99780.01950.01300.99840.0155
00.00280.99970.00850.00690.99940.0110
-340.11640.98450.04920.02640.99720.02150.01200.99840.0147
-360.01610.99600.02060.02060.99600.01640.00700.99880.0111

查看所有表

3.2 光栅成像点扩展函数建模

提取到对应的ESF后,对水平方向的ESF求导,得到水平方向的线扩展函数(LSF),表达式为

FLS(x)=d[FES(x)]dx=(A2,x-A1,x)×expx-xEkxkx×expx-xEkx+12(2)

同理,垂直方向的线扩展函数表达式为

FLS(y)=d[FES(y)]dy=(A2,y-A1,y)×expy-yEkyky×expy-yEky+12,(3)

式中:yE为垂直方向的刃边点位置;kxky分别为水平和垂直方向刃边过渡程度的参数。

将获得的FLS(x)和FLS(y)相乘,即可得到点扩展函数FPS(x,y):

FPS(x,y)=FLS(x)×FLS(y)=(A2,x-A1,x)(A2,y-A1,y)×expx-xEkx+y-yEkykxky×expx-xEkx+12expy-yEky+12(4)

通过(2)~(4)式,求得图2对应的PSF,结果如图4所示。可以看出,在最小偏向角时,PSF的能量分布最为集中;入射角度偏离此角度越大,水平方向LSF越发散而垂直方向LSF几乎不受影响,这一点有别于基于普通透镜的成像系统。基于普通透镜的成像系统在水平和垂直方向的LSF一般具有对称性,PSF具有中心对称性。因此根据光栅成像系统的PSF特性和其受入射角影响的变化规律,需要采用不同于基于透镜的函数模型来拟合序列PSF的能量分布,如图5所示。

图 4. 部分入射角下光栅成像PSF

Fig. 4. PSF of grating imaging at partial incident angles

下载图片 查看所有图片

图 5. 序列PSF示意图

Fig. 5. Diagram of sequential PSF

下载图片 查看所有图片

由于光栅成像系统的PSF在最小偏向角附近的能量分布变化呈非线性,且水平方向和垂直方向的LSF发散程度不同,所以PSF模型有别于显微透镜成像时的对顶双锥体,因此借鉴Gauss光束[13]理论研究中常用的双曲函数对序列PSF的轴向水平剖面能量分布进行描述,如图6所示。其中,ω0为在最小偏向角时PSF的束腰半径;θR为PSF半径等于束腰半径 2倍时的入射角与最小偏向角的角度差;b为2θR;ω(θR)为θR处的PSF半径;α为曲线轮廓半发散角。

图 6. 轴向水平剖面能量分布示意图

Fig. 6. Schematic of axial horizontal profile energy distribution

下载图片 查看所有图片

PSF半径ω(θ)与θ的关系为

ω2(θ)ω02-2θb2=1(5)

为方便计算,在角度间隔为2°,入射角为8°~-38°时,对光栅所成的一级衍射像以最小偏向角为0°进行变换,即将最小偏向角定义为θ=0°,每组PSF能量值均以最小偏向角时的能量值为标准并对其进行归一化处理,采用(5)式对序列图像的轴向水平剖面的能量分布进行拟合。图7为拟合曲线的上半部分,曲线越集中代表PSF越收敛,光学系统像差对图像影响就越小,成像质量就越好。可以看出,在最小偏向角时,不同能量值E下的曲线最集中,ω0最小,角度偏离最小偏向角越大,曲线越稀疏,PSF半径越大,这与实际成像情况相符合。总体上来说,PSF随入射角发散的轨迹符合双曲函数,且曲线的发散角也随着能量值的减小而增大,具体模型参数如表2所示。

不同能量下曲线的拟合优度如表3所示,可以看出,当能量过大和过小时,拟合优度都会有所降低,当能量为2.6×1 0-2左右时,拟合优度最好。

图 7. 不同能量下PSF半径的变化

Fig. 7. Change of PSF radius under different light intensities

下载图片 查看所有图片

表 2. 不同能量下曲线的拟合参数

Table 2. Fitting parameters of curves under different light intensities

Eω0 /pixelθR /(°)α /(°)
6.5×10-320.0810.4562.51
1.3×10-219.1310.9460.24
2.6×10-217.8512.6554.68
5.2×10-214.2812.3649.12
1.0×10-112.2515.1638.94

查看所有表

表 3. 不同能量下曲线的拟合优度

Table 3. Fitting goodness of curves under different light intensities

E6.5×10-31.3×10-22.6×10-25.2×10-21.0×10-1
R-square0.96090.96830.97230.96990.9600

查看所有表

4 光栅图像复原效果评价

4.1 图像质量评价标准

通过得到的图像PSF,采用Lucy-Richardson算法[14-16]对像差图像进行复原,并选取灰度平均梯度(GMG)[17]和结构相似性(SSIM)[18]两个指标作为复原前后图像的质量评价标准。GMG反映图像中的微小细节反差和纹理变化特征,同时也能反映出图像的清晰度,GMG越大,图像层次越丰富,图像变化就越多,图像也就越清晰。SSIM用于评估两张图像边缘轮廓等几何结构信息的相似重合程度,其值越大,两幅图像之间的相似程度越高。两个指标的具体表达式为

FGMG=1(M-1)×(N-1)i=1M-1j=1N-1[g(i,j+1)-g(i,j)]2+[g(i+1,j)-g(i,j)]22,(6)FSSIM=(2μFμP+ε1)(2σFP+ε2)(μF2+μP2+ε1)(σF2+σP2+ε2),(7)

式中:MN为图像的维度;(i,j)为图像的离散坐标;μFμP分别为原图像和复原后图像的亮度均值;σFσP分别为原图像和复原后图像的对比度标准差,σFP为二者的协方差;ε1ε2为常数,以保证分母不为0。对图8所示的5张像差较大的图像进行复原,复原结果如图9所示,表4为相应的质量评价结果。可以看出,不同模糊程度的图像复原后的GMG和SSIM都有提升,其中GMG提升比例均在60.2%以上,SSIM提升比例均在66.5%以上,且图像的像差越大,提升比例越高。这说明图像的细节得到了有效的提升,尤其在模糊程度较大情况下,原图的结构信息仍可以得到有效的复原。但是由于原图像模糊程度较大,信息丢失较为严重,所以在迭代复原过程中难免会出现振铃现象,在色彩方面存在一定的失真。

图 8. 光栅系统所成图像

Fig. 8. Images formed by grating system

下载图片 查看所有图片

图 9. 复原图像

Fig. 9. Restored images

下载图片 查看所有图片

表 4. 图像复原前后的质量评价

Table 4. Quality evaluation before and after image restoration

θ /(°)GMGSSIM
Before restorationAfter restorationIncrease rateBefore restorationAfter restorationIncrease rate
40.00860.015074.42%44.94%89.31%98.73%
20.00820.014576.83%51.36%88.63%72.57%
00.00910.015772.53%53.31%91.94%72.47%
-340.00880.014160.23%53.92%89.76%66.47%
-360.00850.014368.23%48.34%87.49%80.99%

查看所有表

4.2 复原对比实验分析

为了进一步验证所提刃边拟合函数的有效性,对其与其他两种函数进行比较。在所拍摄的系列图像中选取入射角为-34°的1幅图像,分别采用Gauss函数的积分形式、Hyperbolic函数、Boltzmann函数对刃边函数拟合后再复原,复原结果如图10所示,可以看出,图像模糊程度较大时,Gauss函数的积分形式很不理想,Hyperbolic函数可以恢复部分图像信息,但仍存在较大像差,而Boltzmann函数的复原效果明显优于前两者,可以有效复原图像的部分细节信息和结构信息。表5为复原前后不同拟合函数的质量评价结果,在复原前后,Boltzmann函数的GMG与SSIM提升比例均在60%以上,均高于其他两种拟合函数。

图 10. 不同拟合函数的复原对比。(a) Gauss函数;(b) Hyperbolic函数;(c) Boltzmann函数

Fig. 10. Restoration comparison of different fitting functions. (a) Gauss function; (b) Hyperbolic function; (c) Boltzmann function

下载图片 查看所有图片

表 5. 不同拟合函数的质量评价

Table 5. Quality evaluation of different fitting functions

FunctionGMGSSIM
BeforerestorationAfterrestorationIncreaserateBeforerestorationAfterrestorationIncreaserate
Gauss0.00913.41%58.29%8.10%
Hyperbolic0.00880.00957.95%53.92%69.38%28.67%
Boltzmann0.014160.23%89.76%66.47%

查看所有表

5 结论

针对传统刃边拟合方法不能有效地应用于像差较大的光栅图像中的问题,提出一种基于Boltzmann函数的刃边拟合方法。由所提方法构建的点扩展函数更精确,对不同模糊程度的图像进行复原后,GMG提升均在60.2%以上,SSIM提升均在66.5%以上,所提方法的复原效果优于其他同类方法。根据光栅成像特点,构建了以入射角为自变量的点扩展函数模型,为解决光栅像差问题及为该类型成像系统的图像复原提供了一种有效的方法和途径。平面光栅成像系统在对一般物体成像时仅以平面光栅为成像元件,是一种新型的无透镜成像系统,且体积小、质量轻,在****、航空工业、医学影像等领域具有广阔的应用前景。本文成果有助于对无透镜光栅成像新技术的研究。

参考文献

[1] KöhlerR, HirschM, MohlerB, et al. Recording and playback of camera shake: benchmarking blind deconvolution with a real-world database[M] ∥Fitzgibbon A, Lazebnik S, Perona P, et al. Computer vision - ECCV 2012. Heidelberg: Springer, 2012: 27- 40.

[2] Chen Y M, Chen M M, Zhu L, et al. Measure and model a 3-D space-variant PSF for fluorescence microscopy image deblurring[J]. Optics Express, 2018, 26(11): 14375-14391.

[3] 陈荣军, 谭洪舟, 谭伟清, 等. 一种基于模糊图像处理的透镜快速测焦方法[J]. 光学学报, 2015, 35(2): 0210002.

    Chen R J, Tan H Z, Tan W Q, et al. A fast lens focus measurement method based on blurred image processing[J]. Acta Optica Sinica, 2015, 35(2): 0210002.

[4] Pan JS, Dong JX, Tai YW, et al. Learning discriminative data fitting functions for blind image deblurring[C]∥2017 IEEE International Conference on Computer Vision (ICCV), October 22-29, 2017, Venice. New York: IEEE, 2017: 1077- 1085.

[5] 谢丁杰, 李铁成, 冯华君, 等. 卡塞格林光学遥感系统的图像复原[J]. 光学学报, 2011, 31(6): 0611004.

    Xie D J, Li T C, Feng H J, et al. Image restoration of Cassegrain optical remote sensing system[J]. Acta Optica Sinica, 2011, 31(6): 0611004.

[6] 杨利红, 赵变红, 张星祥, 等. 点扩展函数Gauss拟合估计与遥感图像恢复[J]. 中国光学, 2012, 5(2): 181-188.

    Yang L H, Zhao B H, Zhang X X, et al. Gaussian fitted estimation of point spread function and remote sensing image restoration[J]. Chinese Optics, 2012, 5(2): 181-188.

[7] 方明, 王成, 尹大力. 基于最优费米函数的点扩展函数求取与图像复原[J]. 光子学报, 2014, 43(S1): 0110001.

    Fang M, Wang C, Yin D L. Optimal Fermi function based PSF calculation and image restoration[J]. Acta Photonica Sinica, 2014, 43(S1): 0110001.

[8] Zhou X, Molina R, Ma Y, et al. Parameter-free Gaussian PSF model for extended depth of field in brightfield microscopy[J]. IEEE Transactions on Image Processing, 2020, 29: 3227-3238.

[9] Aguet F, van de Ville D, Unser M. Model-based 2.5-D deconvolution for extended depth of field in brightfield microscopy[J]. IEEE Transactions on Image Processing, 2008, 17(7): 1144-1153.

[10] Holmes TJ, BhattacharyyaS, Cooper JA, et al. Light microscopic images reconstructed by maximum likelihood deconvolution[M] ∥Pawley J B. Handbook of biological confocal microscopy. Boston: Springer, 1995: 389- 402.

[11] ChackoN, LieblingM. Fast spatially variant deconvolution for optical microscopy via iterative shrinkage thresholding[C]∥2014 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), May 4-9, 2014, Florence, Italy. New York: IEEE, 2014: 2838- 2842.

[12] He X R, Zhang W P, Chen M X, et al. Study on astigmation of the virtual images formed by grating diffraction[J]. Proceedings of SPIE, 2006: 602731-602737.

[13] 崔立夫, 罗瑞芳. Gauss光束参数简介及束腰的快速测量计算[J]. 天津科技, 2018, 45(1): 27-31.

    Cui L F, Luo R F. Introduction of Gaussian beam parameters and rapid measurement and calculation of beam waist[J]. Tianjin Science & Technology, 2018, 45(1): 27-31.

[14] Li T J, Yuan Y, Shuai Y, et al. Joint method for reconstructing three-dimensional temperature of flame using Lucy-Richardson and nearest neighbor filtering using light-field imaging[J]. Science China Technological Sciences, 2019, 62(7): 1232-1243.

[15] 李勇, 范承玉, 时东锋, 等. 基于加速阻尼Richardson-Lucy算法的湍流退化图像盲复原方法[J]. 激光与光电子学进展, 2011, 48(8): 081001.

    Li Y, Fan C Y, Shi D F, et al. Turbulence-degraded image blind restoration method using accelerated and damped Richardson-Lucy algorithm[J]. Laser & Optoelectronics Progress, 2011, 48(8): 081001.

[16] 张艳艳, 王欢欢, 陈苏婷. 基于Lucy-Richardson的自适应光学图像复原[J]. 信息技术, 2015, 39(12): 35-37, 41.

    Zhang Y Y, Wang H H, Chen S T. Adaptive optics image restoration based on Lucy-Richardson[J]. Information Technology, 2015, 39(12): 35-37, 41.

[17] Rajora S, Butola M, Khare K. Mean gradient descent: an optimization approach for single-shot interferogram analysis[J]. Journal of the Optical Society of America A, 2019, 36(12): D7-D13.

[18] Wang Z, Bovik A C, Sheikh H R, et al. Image quality assessment: from error visibility to structural similarity[J]. IEEE Transactions on Image Processing, 2004, 13(4): 600-612.

卢泉, 张泽昊, 张卫平, 刘诣荣. 基于Boltzmann函数刃边拟合的光栅成像系统点扩展函数模型[J]. 光学学报, 2020, 40(14): 1405003. Quan Lu, Zehao Zhang, Weiping Zhang, Yirong Liu. Point Spread Function Model of Grating Imaging System Based on Boltzmann Function Edge Fitting[J]. Acta Optica Sinica, 2020, 40(14): 1405003.

本文已被 2 篇论文引用
被引统计数据来源于中国光学期刊网
引用该论文: TXT   |   EndNote

相关论文

加载中...

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!