大角度倾斜照明条件下的PIE迭代重建算法研究 下载: 1000次
1 引言
作为一种新近发展起来的相干衍射成像技术[1-3],PIE (ptychographic iterative engine)和ePIE(extended ptychographic iterative engine)都是利用照明光对样品进行点阵扫描,记录样品在扫描过程中所形成的衍射光斑列阵,并通过与之相应的迭代算法快速高精度地重建出样品的透射函数。和传统的相干衍射成像技术相比,PIE具有视场大、成像精度高和收敛速度快等诸多优点[4-6],而且重建的图像在对比度、信噪比和分辨率等各个方面已经可与传统的光学成像技术相比拟。在PIE基础上发展起来的ePIE技术,不仅可以恢复出样品的复振幅分布,还可以恢复出探针光的复振幅分布。关于PIE的研究工作已经从最初的电子束[1]和X射线波段[2-3]快速拓展到深紫外[7]、可见光[4-6]和太赫兹[8]波段,并被用于生物样品观测[5]、光场在线检测[9-11]、三维成像[12]、光学元件检测[13]和应力测量[14]等众多领域。
PIE在成像速度和成像质量方面的优点,主要源自于高度冗余的记录数据,一般记录的衍射斑数量越多,重建图像的质量就越好。受平移台扫描速度的限制,大部分实验需要数秒到数分钟不等的数据记录时间,因此普通PIE技术不能对等离子体分布[15]、激光损伤过程[16]和活细胞活动[17-18]等动态和瞬态样品进行成像。为缩短PIE的数据采集时间,各种单次曝光PIE技术[19]广受关注,它们用一台CCD的单次曝光采集整个衍射斑阵列,并采用相应的算法进行图像重建[20-21]。这些技术的具体实现方法各不相同,最简单的方法是用入射角度各不相同的多个光束同时对样品进行照明,并在CCD上形成彼此分立的衍射光斑[19-21]。为了避免因衍射光斑之间重叠而带来图像重建噪声、导致分辨率降低的问题,相邻的衍射光斑之间必须有足够的距离,相邻照明光束之间的角度差必须足够大。在大多数实际实验中,为了光路排布的方便,相邻光束之间的夹角理论上一般应在5°左右,但即使记录7×7的衍射光斑阵列,边缘照明光束的入射角度将达到15°。为了满足采样定理对照明光相位分布的采样要求,此时CCD单个像素的尺寸要小于一个波长,才可能在迭代过程分辨出透射光复振幅,如果要记录13×13的衍射光斑阵列,则要求CCD像元的尺寸小于半个波长。对于常用的氦氖激光来说,要求CCD的像元尺寸小于0.3 μm,由于到目前为止还没有如此小像元的CCD,单次曝光PIE成像实验中相邻照明光之间的入射角度一般只能取1°~2°,但当样品的衍射能力稍强时,相邻衍射光斑之间很容易发生部分重叠,从而产生明显的图像噪声,导致对比度降低[19-21],这是单次曝光PIE成像一直没能得到真正应用的根本原因。理论上,我们可以在数据记录时加大相邻照明光间的夹角,并在重建时将每个衍射光斑移到坐标原点(数组中心)后进行计算,但这其实是将边缘衍射斑当作傍轴近似的衍射光斑来处理。在照明光的入射角度大于10°后,傍轴近似将带来明显的计算误差,简单地将衍射光斑移动到坐标中心,并不能解决记录平面上相位不分辨的问题,必须研究大角度照明下的PIE重建算法。这一算法是决定单次曝光PIE成像能否取得实际应用的最关键因素。
为解决大角度照明条件下的PIE精确重建问题,本文对PIE的重建算法进行改进,用小角度照明来计算样品在大角度照明时的透射光,并对传递函数进行修正,在保证正确计算衍射光斑强度的同时,避免在透射和衍射光中出现大的相位梯度,从根本上解决大倾斜角度照明情况下PIE的迭代重建问题,为单次曝光PIE成像的进一步发展和实际应用解决了最为关键的技术难题。本文在进行相关理论分析的同时,利用数值模拟验证和实际实验检验了该方法的可行性,证明即使在32°入射角的照明情况下,仍然能得到准确的重建图像。
2 基本原理
2.1 基本原理
若物体透射函数为O(x,y),则透射光为
由于U(x,y)中存在相位倾斜因子
其中表示卷积。令
其中
探测器平面上的光场分布可以写为
其中
由于
图 1. 大角度PIE原理示意图。(a)光路原理图;(b)算法流程图
Fig. 1. Schematic diagram of PIE with highly tilted illumination. (a) Optical path schematic; (b) flowchart of the algorithm
在利用实验数据进行图像重建时,分别给样品透射函数
1) 计算其透射光场
2) 将探测器探测的强度分布
3) 用下一个位置的衍射光斑重复上述1)、2)步骤,直至所有的衍射光斑全部计算完成,其中
4) 实际记录光斑和重建得到光斑之间的误差,表示为
相应的算法流程如
2.2 数值仿真
为了说明上述大角度倾斜照明迭代重建和普通傍轴近似条件下的迭代重建公式对PIE重建图像质量的影响特性,首先利用数值模拟方法进行验证。光源波长为633 nm,激光点源以56°入射角穿过一个直径为2 mm的小孔后照射到样品上,点源、小孔、样品和探测器之间的距离分别是210 mm、9 mm和80 mm,探测器采样间隔为9 μm,分辨率为2048 pixel×2048 pixel。为了满足采样定理的要求,并准确计算出照射在样品平面上的照明光分布,用4500×4500的数组和0.45 μm的采样间隔来对小孔平面的光进行采样,在衍射面上以9 μm的采样间隔用惠更斯-菲涅耳叠加积分公式,计算无样品时的光斑复振幅分布。由于惠更斯-菲涅耳叠加积分不包含任何近似,可以认为计算所得到的衍射光是完全准确的。计算所得衍射光斑的强度分布在
图 2. 不同入射角度下的光斑分布图。(a)利用惠更斯-菲涅耳叠加积分计算的大角度衍射光斑;(b)利用大角度角谱计算的衍射光斑;(c) 3°时对应的衍射光斑;(d) 0°时对应的衍射光斑
Fig. 2. Diffraction patterns with different incident angles. (a) Diffraction pattern calculated by spherical wave integration based on Huygens-Fresnel principle with large incident angle; (b) diffraction pattern calculated by the revised angular spectrum with the same incident angle; (c) diffraction pattern when the incident angle is 3°; (d) diffraction pattern when the incident angle is 0°
图 3. 模拟初始值。(a)样品振幅;(b)样品相位;(c)照明光振幅;(d)照明光相位
Fig. 3. Simulated initial value. (a) Amplitude of specimen; (b) phase of specimen; (c) amplitude of probe light; (d)phase of probe light
为了便于比较,首先按照常规傍轴近似方法,将
图 5. 大角度下普通ePIE重建结果(500次迭代)。(a)物体振幅;(b)物体相位;(c)照明光振幅;(d)照明光相位
Fig. 5. Reconstructed results based on general ePIE algorithm with highly tilted illumination after 500 iterations. (a) Amplitude of specimen; (b) phase of specimen; (c) amplitude of probe light; (d) phase of probe light
图 6. 基于大角度角谱计算方法的ePIE重建结果(500次迭代)。(a)物体振幅;(b)物体相位;(c)照明光振幅;(d)照明光相位
Fig. 6. Reconstructed results based on revised angular spectrum and ePIE after 500 iterations. (a) Amplitude of specimen; (b) phase of specimen; (c) amplitude of probe light; (d) phase of probe light
为精确对比两种计算方法的收敛性,其对应的误差曲线如
在上述讨论的大角度倾斜照明中,入射角的角度被假定为已知,但是实际实验中总存在一定的误差。为讨论简单并不失一般性,可考虑照明光同x轴夹角为ε的一维情况,实际形成的衍射光斑强度为
实际形成的衍射斑I(x)和计算所得的衍射斑I'(x),其强度分布和位置都不相同。但用ePIE进行迭代重建的过程中,每一步都用I(x)来代替I'(x),并在此基础上对照明光进行更新,经过足够多次数的迭代后,
为验证上述关于角度误差对重建精度影响的结论,采用和
图 8. 角度误差分别为-1.5°、0°和1.5°时的重建结果。(a)照明光振幅;(b)照明光频谱;(c)物体振幅;(d)角度误差变化时的误差曲线
Fig. 8. Reconstructed results at the angle errors from -1.5° to 1.5°. (a) Reconstructed amplitude of probe light; (b) spectrum intensity of probe light; (c) amplitude of specimen; (d)error curve with the change of different angle errors
2.3 实验验证
为了检验本文所提方法在实验中的可行性,利用氦氖激光进行了实验验证。光路仍然采用
利用上文提出的大角度照明条件下的ePIE重建方法,对
图 9. 部分衍射光斑阵列(坐标对应衍射光斑在10×10阵列中的位置信息)
Fig. 9. Part of diffraction patterns recorded by CCD, in which the coordinates represent the position information among the grid of 10×10
图 10. 基于大角度角谱计算方法的ePIE实验结果。(a)物体振幅;(b)物体相位;(c)照明光振幅;(d)照明光相位
Fig. 10. Experimental results based on revised angular spectrum and ePIE with highly tilted illumination. (a) Amplitude of specimen; (b) phase of specimen; (c) amplitude of probe light; (d) phase of probe light
为了便于比较,采用傍轴近似方法,将所有衍射斑移动到数组中心,重建所得的样品的振幅和相位在
为了量化衡量本方法对PIE图像分辨率的提高效果,用标准分辨率板USAF 1951作为样品重复上述实验,重建图像在
图 11. 大角度下普通ePIE重建实验结果。(a)物体振幅;(b)物体相位;(c)照明光振幅;(d)照明光相位
Fig. 11. Experimental results based on general ePIE algorithm with highly tilted illumination. (a) Amplitude of specimen; (b) phase of specimen; (c) amplitude of probe light; (d) phase of probe light
图 12. 两种算法对应的误差曲线
Fig. 12. Experimental error curves corresponding to the two calculation methods
图 13. 两种不同方法恢复的标准分辨率板(USAF 1951)。(a)采用本文提出算法的重建结果;(b) 图(a)的局部放大;(c)相同数据下利用普通ePIE的重建结果;(d)图(c)的局部放大
Fig. 13. Experimental results of USAF 1951 test target. (a) Reconstructed results with the proposed algorithm; (b) locally enlarged view of Fig. 13 (a); (c) reconstructed results with the traditional ePIE algorithm; (d) locally enlarged view of Fig. 13 (c)
3 结论
为解决多角度照明单次曝光PIE成像中,照明光的倾角不能超过傍轴近似范围的问题,本文提出一种大倾角照明条件下的PIE重建算法。利用小角度照明来计算样品在大角度照明时的透射光,并用修正的传递函数对光束在样品平面和探测器平面之间进行往复传播,不仅可确保衍射光斑强度计算正确,还可避免出现大倾斜相位。本文在给出系统理论分析的同时,进行了数值模拟和实验验证,充分证明了本文方法在实际实验中的可行性,空间分辨率提升了4倍。本文所提方法从根本上解决了大倾角度照明情况下PIE的迭代重建问题,为单次曝光PIE成像的进一步发展和实际应用解决了最为关键的技术难题。
[1] Humphry M J, Kraus B, Hurst A C, et al. Ptychographic electron microscopy using high-angle dark-field scattering for sub-nanometre resolution imaging[J]. Nature Communications, 2012, 3: 730.
[2] Brun F, di Trapani V, Batey D, et al. Edge-subtraction X-ray ptychographic imaging with pink beam synchrotron radiation and a single photon-counting detector[J]. Scientific Reports, 2020, 10: 6526.
[3] Polo C C, Pereira L, Mazzafera P, et al. Correlations between lignin content and structural robustness in plants revealed by X-ray ptychography[J]. Scientific Reports, 2020, 10: 6023.
[4] Xu W H, Lin H X, Wang H Y, et al. Super-resolution near-field ptychography[J]. Optics Express, 2020, 28(4): 5164-5178.
[5] Jiang S W, Zhu J K, Song P M, et al. Wide-field, high-resolution lensless on-chip microscopy via near-field blind ptychographic modulation[J]. Lab on a Chip, 2020, 20(6): 1058-1065.
[6] Song P M, Jiang S W, Zhang H, et al. Super-resolution microscopy via ptychographic structured modulation of a diffuser[J]. Optics Letters, 2019, 44(15): 3645-3648.
[8] Wang D Y, Li B, Rong L, et al. Multi-layered full-field phase imaging using continuous-wave terahertz ptychography[J]. Optics Letters, 2020, 45(6): 1391-1394.
[9] Du M Q, Loetgering L. Eikema K S E, et al. Measuring laser beam quality, wavefronts, and lens aberrations using ptychography[J]. Optics Express, 2020, 28(4): 5022-5034.
[10] Sun J S, Chen Q, Zhang J L, et al. Single-shot quantitative phase microscopy based on color-multiplexed Fourier ptychography[J]. Optics Letters, 2018, 43(14): 3365-3368.
[11] Dong X, Pan X C, Liu C, et al. Single shot multi-wavelength phase retrieval with coherent modulation imaging[J]. Optics Letters, 2018, 43(8): 1762-1765.
[13] Zhang X J, Cheng B, Liu C, et al. Measurement of mid-frequency wavefront error for large optical components with ptychography[J]. Applied Optics, 2019, 58(2): 264-269.
[14] Bei C, Zhang X J, Cheng L, et al. Full-field stress measurement based on polarization ptychography[J]. Journal of Optics, 2019, 21(6): 065602.
[15] Kodama R, Norreys P A, Mima K, et al. Fast heating of ultrahigh-density plasma as a step towards laser fusion ignition[J]. Nature, 2001, 412(6849): 798-802.
[16] Liu F, Jiao H F, Ma B, et al. Influence of the surface and subsurface contaminants on laser-induced damage threshold of anti-reflection sub-wavelength structures working at 1064 nm[J]. Optics & Laser Technology, 2020, 127: 106144.
[17] Petty H R. Spatiotemporal chemical dynamics in living cells: from information trafficking to cell physiology[J]. Biosystems, 2006, 83(2/3): 217-224.
[18] Marrison J, Räty L, Marriott P, et al. Ptychography: a label free, high-contrast imaging technique for live cells using quantitative phase information[J]. Scientific Reports, 2013, 3: 2369.
[19] Pan X C, Liu C, Zhu J Q. Single shot ptychographical iterative engine based on multi-beam illumination[J]. Applied Physics Letters, 2013, 103(17): 171105.
[20] He X L, Liu C, Zhu J Q. Single-shot Fourier ptychography based on diffractive beam splitting[J]. Optics Letters, 2018, 43(2): 214-217.
[21] He X L, Liu C, Zhu J Q. Single-shot aperture-scanning Fourier ptychography[J]. Optics Express, 2018, 26(22): 28187-28196.
昌成成, 潘兴臣, 陶华, 刘诚, 朱健强. 大角度倾斜照明条件下的PIE迭代重建算法研究[J]. 光学学报, 2020, 40(17): 1705001. Chengcheng Chang, Xingchen Pan, Hua Tao, Cheng Liu, Jianqiang Zhu. Reconstruction Algorithm for Ptychographic Iterative Engine with Highly Tilted Illumination[J]. Acta Optica Sinica, 2020, 40(17): 1705001.