非相干编码孔径相关全息的研究进展 下载: 1622次封面文章
1 引言
根据照明方式,传统光学成像系统大体可分为2类,即相干光学成像系统和非相干光学成像系统[1]。典型的相干光学成像系统有光学相干层析成像系统、光学全息成像系统等。传统的光学全息成像方法利用光的空间相干性,通过干涉记录、衍射再现的方式实现成像。故传统全息大都采用高相干性的激光作为光源。然而,采用激光光源的成像系统不仅对环境要求极高,还会产生散斑噪声和寄生干涉,且无法应用到白光领域(白光是非相干光),这些因素极大地限制了传统的光学全息成像的应用[2]。非相干全息技术可以很好地解决这一问题,它打破了传统光学全息成像技术对光源相干性的要求,可应用于材料表面检测、生物细胞探测、三维目标跟踪、大型望远系统等。
自1961年美国科学家Mertz和Young提出非相干全息成像概念以来,非相干全息理论得到不断发展和完善[3-7]。非相干全息其实是基于光的空间自相干性,因而分波尤为重要。早期提出的分波方法主要分为三类:分振幅分波法[4,8-9]、孔径分波法[4-6]和衍射分波法[10-11]。分波后的物光与其同源的自参考光在记录平面进行干涉,从而获得非相干全息图。早期记录非相干全息图的方法有:1979年美国爱荷华大学的Poon等[12-13]提出的利用点探测器扫描记录包含物体信息与菲涅耳波带片的非相干全息图的方法;2001年以色列本-古里安大学的Li等[14]提出的通过对一组不同角度拍摄的图像进行计算并合成非相干全息图的方法。
非相干全息的记录与衍射分波随着电荷耦合器件(CCD)和空间光调制器(SLM)的出现变得更加简单且方便[15]。2007年,Rosen等[16-17]提出了菲涅耳非相干相关全息(FINCH)术,利用SLM进行衍射分光和相移,并在CCD上记录非相干全息图,通过与相干数字全息相同的重建方法来重构物体的三维信息。为提高系统分辨本领和改善再现像质量,2009年,以色列本-古里安大学的Katz等[18-23]将合成孔径的相关理论与非相干数字全息成像结合起来,提出了一种基于菲涅耳元件的合成孔径(SAFE)技术。利用该技术所构建的成像系统突破了传统成像系统分辨率的限制,其分辨率超过了瑞利分辨极限。2013年美国南佛罗里达大学的Hong等[24]结合计算成像的方法,利用超分辨率图像重建技术提高非相干数字全息的成像分辨率。目前,FINCH技术已经被应用在高分辨率合成孔径成像[19]、非相干彩色全息[25]、非扫描荧光生物样品显微成像[26]和自适应光学[27-28]等领域。
由于FINCH系统的调制传递函数(MTF)同时具有相干成像系统的形状和非相干成像系统的带宽,因此其分辨率比传统的非相干成像系统高1.5倍,比相干成像系统的分辨率高2倍[29-30]。进一步分析FINCH的分辨率发现,其横向分辨率高于常规成像系统,但轴向分辨率较低[31]。为了提高系统的轴向分辨率,2016年,以色列的Vijayakumar等[32]提出了一种新的基于FINCH的非相干全息技术——编码孔径相关全息(COACH)。由点物衍射的经编码相位掩模(CPM)调制的光,与同源衍射的未调制光进行干涉,由双波干涉产生的脉冲响应记作点扩展全息图(PSH),作为重建函数。生成PSH后,将一个复杂的物体放置在同样的位置上,用相同的CPM记录该物体全息图,通过PSH和物体全息图之间的互相关来重建物体的像。为了重建出三维图像,需要通过移动点物(即针孔)的轴向位置进行训练,从而得到一个PSH库。COACH具有高轴向分辨率、高光谱分辨率[33]、超分辨率[34]等优点。
双波干涉记录全息图的系统对光源的相干性要求较高,并且光路复杂性较高。而Vijayakumar等发现,物体的三维信息不仅存储在全息图的相位中,同样也存储在振幅中,因此双波干涉不再是唯一的记录方法。2017年,Vijayakumar等[35]在COACH的光学结构上进行简化,提出了一种无干涉非相干数字全息技术——无干涉编码孔径相关全息(I-COACH)。点物衍射的光在全部被CPM调制后由CCD记录,经过相移得到PSH,在同样的CPM下记录复杂物体的全息图,最后通过互相关来重建目标。在I-COACH中,存储、传输和处理数据都更容易,并且系统成像的横向和轴向分辨率与等效数值孔径(
COACH系统虽然提高了轴向分辨率,却产生了背景噪声,这是COACH系统需要解决的基本问题。2018年,以色列本-古里安大学的Rai等[37]提出了一种非线性自适应的重建方法,将重建过程视为一个光学模式识别问题,通过选择最优化的重建函数进行图像重构,不仅抑制了直流偏置和背景噪声,而且提高了系统的时间分辨率。相同课题组的Mukherjee等[38-39]将该方法与散射介质相结合,提出了一种不需要任何关于目标的先验信息的单镜头成像技术,通过全息图的熵来选择非线性重建过程的最优化参数,实现了透过散射介质的自适应非线性成像。
本文详细介绍COACH成像技术及其改进方法和相关衍生技术。阐述COACH成像的基本原理,分析并讨论其光路结构、成像分辨率和再现像质量,总结了多帧平均及非线性重构技术等改进方法,展望了未来COACH技术的研究路线和发展前景。
2 COACH成像原理
COACH成像至少需要在相同的条件下使用相同的CPM记录2幅全息图:一幅全息图称为物体全息图,包含被观测物体的信息;另一幅全息图是用点源记录的PSH。通过PSH与物体全息图的互相关来重建目标。由于相位掩模的随机性,当针孔或物体的轴向距离超过相关长度时重建图像会被严重破坏,导致图像的质量下降。因此,为了在不同的平面上重建目标,需要采用训练的方式获得PSH库。COACH的光路如
图 1. 成像光路示意图。(a) COACH[32];(b) I-COACH[35];(c) LI-COACH[36];(d)散射成像[39]
Fig. 1. Schematic of imaging optical paths. (a) COACH[32]; (b) I-COACH[35]; (c) LI-COACH[36]; (d) scattering imaging[39]
当对物体进行记录时,任意的非相干照明的二维物体都可以将其看成无数个点的集合:
式中:
合成全息图,通过对得到的PSH与物体全息图进行互相关即可重建物体[32],表达式为
式中*表示取共轭。
然而,Vijayakumar等发现,相位信息在重建过程中是可有可无的,因而不再需要双波干涉来记录物体的三维信息。在此基础上,I-COACH系统通过去掉COACH光路中的偏振片P2以消除双波干涉,利用偏振片P1使得入射光的偏振方向与SLM保持一致,从而直接对所有入射光进行调制,如
式中:
式中
此外,与COACH不同的是,I-COACH虽然也需要3次相移,但只需直接将强度投影到指定方向并叠加即可合成全息图[35],合成全息图可表示为
式中:
由于无透镜系统没有像差,为了获得更好的强度响应,Vijayakumar等去掉了I-COACH光路中的透镜L2,提出了无透镜的LI-COACH系统,达到了消除像差、扩大视场的目的,如
综上所述,COACH、I-COACH以及LI-COACH系统具有以下异同点:1)均为同轴光路,需采用相移技术来消除0级像与孪生像,重建时需要记录PSH与物体全息图并进行互相关运算,三维重建时还需要记录PSH库;2)COACH通过双波干涉记录全息图,而I-COACH与LI-COACH均摒弃了双波干涉;3)COACH中的SLM对入射平面波进行部分调制,而I-COACH中的SLM对入射平面波进行完全调制,LI-COACH中的SLM对入射球面波进行完全调制;4)合成全息图时,COACH与I-COACH至少需要记录3幅PSH,而LI-COACH只需要2幅,在记录时COACH所用的CPM不独立,而I-COACH与LI-COACH所用的CPM则完全独立。
在COACH及其衍生系统中,获得CPM是成像的关键步骤。利用G-S(Gerchberg-Saxton)算法[40-41]生成CPM的流程如
3 成像分辨率的提高与再现像质量的提升
为了提高FINCH的轴向分辨率,Vijayakumar等提出了COACH系统,其成像分辨率与具有相同
COACH及其改进的相关系统的分辨率如
FINCH和COACH的重建强度与针孔距透镜L2焦平面的轴向距离之间的关系如
表 1. COACH及其相关系统的分辨率
Table 1. Resolutions of COACH and related systems
|
图 3. 归一化重建强度与针孔距透镜L2焦平面的轴向距离之间的关系[32]
Fig. 3. Relationship between normalized reconstruction intensity and axial distance of pinhole from focal plane of lens L232
图 4. 常规成像系统、FINCH和COACH的成像结果图[32]
Fig. 4. Imaging results of regular imaging system, FINCH and COACH[32]
如
为了提高重建质量、降低背景噪声,可将重建过程看作一个光学模式识别问题[37,44-46]。原本使用 进行相关重建的过程可以看作在光学模式识别中使用匹配滤波器,但是PSH的自相关峰不是最尖锐的,因而其重建效果不是最好的。使用纯相位滤波器[45]的重建结果明显优于匹配滤波器,但仍不是最好的。2018年Rai等[37]提出非线性自适应的重建方法,在频域对物体进行重建。对于点物,其频域自适应的重建结果F(
式中:“F”表示傅里叶变换;
图 5. 不同(o,r)对应的非线性重建结果[37]
Fig. 5. Nonlinear reconstruction results corresponding to different (o,r)[37]
除此之外,Vijayakumar等还提出了利用混合FINCH-COACH系统或平均技术的方法来降低背景噪声。混合系统结构如
式中
当
图 7. 归一化重建强度与轴向距离之间的线性关系[43]
Fig. 7. Linear relationship between normalized reconstruction intensity and axial distance[43]
图 8. 不同传输因子对应成像结果[43]
Fig. 8. Imaging results corresponding to different transmission factors[43]
平均COACH(Averaged COACH)技术是通过降低时间分辨率来降低背景噪声的。假设每2个CPM之间都是独立的,则记录由
图 9. 当CPM数量不同时,COACH的平均重建结果[43]
Fig. 9. Average reconstruction results of COACH for different numbers of CPMs[43]
4 COACH相关技术研究与应用
FINCH、COACH等非相干全息系统主要用于三维物体重建,其中FINCH与COACH均采用了双波干涉的方案,而I-COACH与LI-COACH不再使用双波干涉,并且LI-COACH只需要记录2幅强度响应图像,因此LI-COACH的时间分辨率最高。
对COACH进行深入研究,发现COACH不仅具有较高的轴向分辨率,还具有很好的光谱分辨率。紧接着,Vijayakumar等[33]提出了通过在COACH系统中加入衍射透镜的方法进行四维成像的方案,其光路示意图如
如何透过散射介质成像一直都是一个研究热点。考虑到CPM与散射介质均具有随机性,Mukherjee等将散射介质引入到LI-COACH系统中,用一个散射介质加透镜代替SLM来对物光进行调制,其光路结构如
图 12. 基于散射介质对数字“5”的非线性重建,比例尺:350 μm[39]
Fig. 12. Nonlinear reconstruction of digit ‘5’ based on scattering medium, scale bar: 350 μm[39]
I-COACH系统每次重建都至少需要采集3幅图像,因而其传输、处理数据的过程较为耗时。为了提高时间分辨率,研究人员提出了单帧成像技术,这为I-COACH用于动态实时成像提供了可能[47]。利用G-S算法生成2个CPM,并使它们在SLM上并排显示,用作系统孔径。将针孔衍射的光引入系统中,记录对应于这2个CPM的2个脉冲响应,并且对二者作差以去除全息图的直流偏置项、减小背景噪声。采用同样的方法训练记录PSH库,物体在任意平面上的图像是通过物体全息图与PSH库中相应的全息图之间的互相关来进行重建,其光路如
图 14. 单镜头COACH成像系统CPM合成示意图[47]
Fig. 14. Schematic of CPM synthesis for single camera COACH imaging system[47]
Rai等[48]在扩大I-COACH成像视场方面也做了相应研究,将I-COACH的视场扩展到CCD面积所限制的范围之外。Rai等将所记录的多个PSH拼接在一起产生一个SPSH(Synthetic PSH),其面积是CCD记录的任何一个PSH的9倍。如
对于大型望远镜系统,成像透镜不仅需要消耗大量材料而且精度不够高,目前一般采用合成孔径技术,通过多个小型透镜覆盖全孔径进行成像。2017年,Bulbul等[52]在I-COACH的基础上,通过利用面积低至总孔径面积1.4%的合成环形CPM证明了部分孔径成像系统(PAIS)可进行三维成像,如
图 17. 不同半径的PAIS系统成像结果[52]
Fig. 17. Imaging results of PAIS systems with different radii[52]
5 结束语
简要介绍了COACH技术的发展和建立过程,详细介绍了COACH技术的研究进展。COACH系统是一种简单、非扫描、高分辨率的三维成像系统,将物体的三维信息压缩到一个二维全息图内,其存储、传输和处理数据都更容易,并且具有与相同
综合相关文献及报道,通过分析总结来看,该技术的进一步发展亟需突破以下重难点:1) 目前COACH技术的基础理论还需要进一步研究扩展,可提出一种系统的、全方位的、自适应的研究理论来解释传播、记录与重建过程;2) COACH技术的衍射分波与编码大都采用SLM技术,SLM的衍射效率与调制度对成像结果有较大的影响,可研究设计一种更加稳定的纯光学元件取代SLM进行衍射分波与编码;3) 目前COACH系统采用窄带光源(带宽一般为10~30 nm)进行成像,拓展光源谱宽也是未来的研究趋势,比如实现白光成像;4) 有关COACH的研究基本采用二维平面目标,并且需要多次记录,利用COACH技术对动态目标或者纵向移动的物体进行成像和追踪也可作为一个研究方向;5) 所有COACH技术的重建过程都需要先记录轴向位置对应的PSH,如何摒弃PSH实现无先验重建也是研究的难点所在。
除了解决上述问题外,针对COACH系统目前还有几个未来较有前景的研究方向值得进一步研究和拓展:1) 将CPM的伪随机性扩展到完全随机,引入散射介质进行相位编码,从而实现透过大气和生物组织等动态散射介质成像;2) 现阶段的COACH成像至少需要记录2幅强度图像,可考虑使用单个CPM实现单幅成像,再结合非线性重建来提高系统的时间分辨率;3) 光路中SLM的靶面大小限制了COACH的成像视场,可利用合成孔径或叠层成像等技术实现大视场成像并提高成像分辨率。
综上所述,COACH技术是一种具有很好发展与应用前景的高分辨率三维计算成像技术。可以预见,COACH技术将来不仅在光学显微和生物医学领域有广泛的应用,在天文探测与**侦查等方面也有巨大的应用前景。
[1] 约瑟W 古德曼. 傅里叶光学导论[M]. 秦克诚, 刘培森, 陈家壁, 等, 译. 3版. 北京: 电子工业出版社, 2011: 91- 119.
Goodman JW. Introduction to Fourier optics[M]. Qin K C, Liu P S, Chen J B, et al, Transl. 3rd ed. Beijing: Electronic Industry Press, 2011: 91- 119.
[2] 门高夫, Pascal Picart. 王华英, 等. 菲涅耳非相干相关数字全息研究进展[J]. 影像科学与光化学, 2017, 35(2): 199-207.
Men G F, Pascal P, Wang H Y, et al. Research progress of Fresnel incoherent correlation digital holography[J]. Imaging Science and Photochemistry, 2017, 35(2): 199-207.
[3] MertzL, Young NO. Fresnel transformations of images[C]∥Optical Instruments and Techniques. London: Chapman and Hall Ltd, 1961: 305- 310.
[5] Stroke G W. Restrick R C III. Holography with spatially noncoherent light[J]. Applied Physics Letters, 1965, 7(9): 229-231.
[7] 万玉红, 满天龙, 陶世荃. 非相干全息术成像特性及研究进展[J]. 中国激光, 2014, 41(2): 0209004.
[8] 张文斌, 刘亚飞, 李德阳, 等. 基于迈克耳孙干涉仪的非相干数字全息显微成像[J]. 中国激光, 2017, 44(3): 0309001.
[9] 石顺祥, 王学恩, 马琳. 物理光学与应用光学[M]. 3版. 西安: 西安电子科技大学出版社, 2014: 91- 104.
Shi SX, Wang XE, MaL. Physical optics and applied optics[M]. 3rd ed. Xi'an: Xidian University Press, 2014: 91- 104.
[13] 陈昊. 菲涅耳非相干相关数字全息术关键问题研究[D]. 北京: 北京工业大学, 2013.
ChenH. Investigation of key problems on Fresnel incoherent correlation holography[D]. Beijing: Beijing University of Technology, 2013.
[15] 朱五凤. 基于空间光调制器的非相干数字全息成像特性研究[D]. 郑州: 郑州大学, 2016.
Zhu WF. Research on the characteristics of incoherent digital holographic imaging based on spatial light modulator[D]. Zhengzhou: Zhengzhou University, 2016.
[17] 李滢滢, 秦琬, 高志, 等. 基于两步相移的非相干数字全息显微技术[J]. 激光与光电子学进展, 2017, 54(4): 040901.
[18] KatzB, RosenJ. Incoherent optical imaging using synthetic aperture with Fresnel elements[C]∥Digital Holography and Three-dimensional Imaging, April 26-30, 2009, Vancouver, Canada. Washington DC: Optical Society of America, 2009: PJTuB37.
[23] 弓巧侠, 汪盼, 白云鹤, 等. 合成孔径非相干数字全息的成像特性[J]. 激光与光电子学进展, 2018, 55(8): 080901.
[24] HongJ, Kim MK. Resolution enhancement of incoherent digital holography using the super resolution image reconstruction technique[C]∥Digital Holography and Three-Dimensional Imaging. April 21-25, 2013, Kohala Coast, Hawaii, USA. Washington DC: Optical Society of America, 2013: DTh1A. 3.
[25] Rosen J, Brooker G. Fluorescence incoherent color holography[J]. Optics Express, 2007, 15(5): 2244-2250.
[30] 翁嘉文, 谭穗妍. 自干涉非相干全息成像系统分辨率[J]. 中国激光, 2016, 43(6): 0609006.
[40] Gerchberg R W, Saxton W O. A practical algorithm for the determination of phase from image and diffraction plane pictures[J]. Optik., 1972, 35(2): 227-246.
[42] Pawley JB. Handbook of biological and confocal microscopy [M]. 3rd ed. Plenum Press, 2006: 1- 19.
[45] Horner J L, Gianino P D. Phase-only matched filtering[J]. Applied Optics, 1984, 23(6): 812-816.
Article Outline
计婷, 张乐, 李伟, 孙雪莹, 王剑南, 刘杰涛, 邵晓鹏. 非相干编码孔径相关全息的研究进展[J]. 激光与光电子学进展, 2019, 56(8): 080005. Ting Ji, Le Zhang, Wei Li, Xueying Sun, Jiannan Wang, Jietao Liu, Xiaopeng Shao. Research Progress of Incoherent Coded Aperture Correlation Holography[J]. Laser & Optoelectronics Progress, 2019, 56(8): 080005.