有效视差图像分割与重组的单步全息体视图打印方法 下载: 994次
1 引言
合成全息体视图显示技术是近年来三维全息显示技术的研究热点之一[1-9],其本质是由离散的二维视差图像去无限地逼近连续的真实三维物体,其优势在于获取数据简单,仅需较少的数据就可以获得较高质量的成像效果,无需物体精确的深度信息,是一项双目视差原理和全息技术相结合的前沿技术[10]。
这项技术最早是由美国的DeBitetto教授[11]于1969年提出的,他在论文中提到一种单步合成全景体视图记录方法,其原理是拍摄三维物体不同视角的一系列二维视图,将其做成电影胶片形式,并在记录平面的全息干板前放置一竖直狭缝,逐一拍摄视图的菲涅耳全息图,每个视图仅记录狭缝内的全息图,随着体视图的改变狭缝沿着水平方向同步移动。所以通过这种方法进行再现时,每个狭缝仅仅再现与之对应的体视图,当观察者的双眼处于不同狭缝位置时,就可以看到不同的视图,利用双目视差原理在人脑中形成三维立体效果,这就是合成全息体视图技术的雏形。1970年,King等[12]将该理论进一步发展,提出了两步转移全息体视图方法,以获取可凸出于全息记录介质显示的再现像。自20世纪90年代起,美国麻省理工学院(MIT)的媒体实验室与日本东京工业大学的成像科学与工程实验室围绕合成全息体视图展开了积极的研究[13-14]。为简化“两步法”的制作过程,MIT媒体实验室提出了无限远相机法[15],东京工业大学Yamaguchi等[16-17]提出了一种基于计算机图像处理技术的方法,它们均可获得凸出于全息记录介质显示的再现像。2006年,Brotherton-Ratcliffe[18]在第七届国际显示全息年会上,提出了一种大面积彩色数字全息图拍摄技术,每秒可打印50个像素点。韩国首尔国立大学Hong等[19]开发了基于hogel的全息体视图打印系统,并采用全息单元交叠的方法提高再现视差图像的分辨率。东京工业大学Yamaguchi等[20]为得到高质量的全视差全息体视图,详细分析了hogel尺寸与全息体视图角分辨率、人眼分辨率、观察距离以及空间光调制器像素间距之间的关系,确定了最合适的hogel尺寸范围,并通过实验验证理论分析的正确性。
这些研究都不断推动着全息体视图再现质量的提高,为人们提供更加合理、更加舒适、更高质量的视觉享受,本课题组也在提升全息视图再现质量方面做了很多研究[21-22],最近课题组提出一种有效视差图像分割与重组(EPISM)的单步全息体视图打印方法,可实现单步打印获取凸出于全息记录介质显示的再现像,并且有良好的再现质量[23-24]。本课题组还进行了EPISM方法的全息体视图建模和光学传递函数分析,将全息体视图系统中的波前误差表示为离焦像差,选择正方形硬边光阑,构建了EPISM方法的全息体视图出瞳函数模型,从频率域角度建立了全息体视图的光学传递函数,详细分析了出瞳尺寸及像差对于光学传递函数的影响;同时结合空间域的视觉跳变分析,完成了全息单元的优化[25]。对于EPISM方法的打印效率问题,课题组将场镜与全息散射膜结合使用,调控光线的传播方向,减小光线的发散范围,通过数值仿真与光学实验进行了全息散射膜扩展角的优化设计,结果表明,采用10°微分扩展角的全息散射膜时,既可以得到良好的全息体视图再现效果,又能够较大幅度地提高全息打印效率[26]。但基于EPISM方法的算法对于参数的设置有一定的要求,参数之间相互影响,研究小组在打印较短场景深度的全息体视图时,其再现质量因为再现距离的减小而变得模糊。
针对EPISM方法存在较短场景深度再现质量较差的问题以及全息体视图普遍存在的视觉跳变问题和曲率失真问题,本文简要介绍了EPISM方法的基本原理,分析了EPISM方法的视觉跳变问题和曲率失真问题,特别分析了其对较短视场深度的成像质量的影响,提出了提高较短场景深度全息体视图再现质量的方法,并进行了实验验证和分析。
2 EPISM方法原理
EPISM方法可以等效理解为两步转换合成全息体视图打印方法,两步转换合成全息体视图法是将不同视角的整幅视差图像逐幅干涉记录在H1干板上,先在H1干板上形成合成全息图,然后再将H1干板上合成的全息图转移至H2干板,这种方法虽然能够打印出凸出于全息记录介质的图像,但需要进行两次打印,过程较为复杂,而且全息打印对打印过程要求很高,时间越长对合成的全息图影响越大。而EPISM方法是直接求出需要打印到H2干板上的视差图像,不仅能打印出凸出于全息记录介质的图像,而且只需要进行一次打印,操作过程简单,能够有效地缩短打印时间,减小环境因素带来的影响,全息图的再现质量较好。
EPISM方法的基本原理如
图 1. EPISM方法的总体原理图。(a)有效视角图像段的提取;(b)多个虚拟全息单元有效视角图像段的拼接组合
Fig. 1. General principle diagram of EPISM method. (a) Acquisition of effective perspective image segment; (b) splicing and combination of effective perspective image from multiple virtual holographic hogel
图 2. 虚拟全息单元有效像素部分拼接原理图
Fig. 2. Principle diagram of effective pixel mosaicking for virtual holographic hogel
由于合成全息体视图
式中:floor(·)为向下取整函数,
在计算得到对平面
式中:|·|表示四舍五入取整。
利用几何关系可得到有效图像片段
在得到了有效视角图像片段
3 较短场景深度成像质量的研究
3.1 视觉跳变分析
文中研究的场景深度为8.4 cm,对于场景深度为8.4 cm的体视图再现质量进行改善。首先分析全息体视图的视觉跳变问题,视觉跳变问题是影响全息体视图再现质量的一个重要因素[27]。在合成全息体视图打印中,三维立体效果是基于双目视差原理,将人眼看到不同的两幅二维图像呈现在人脑中的效果。H2干板上每个全息单元在图像平面上都会重建二维图像,当观察者双眼看到相邻两个全息单元不同视角的虚拟图像时,人脑中就会浮现三维立体效果。如
定义两个相邻图像之间的角增量为Δ
用
根据(4)式,在产生视觉跳变的情况下,
3.2 衍射效应分析
减小全息单元尺寸可以减小视觉跳变带来的影响,从而提高全息体视图的再现质量,但现在全息单元都是采用拼接形式构成全息图,目前一般的全息单元均采用矩形光瞳,不同全息单元之间的边界将会形成栅格结构,当全息单元的尺寸过小时,全息单元的边界栅格对入射光的衍射效应会相应增强,即边界衍射效应增强,边界衍射效应会使体视图的再现像模糊,从而影响再现质量。
如
如
进而可以得到衍射产生的极限分辨率为
由(8)式可知,极限分辨率受
在
3.3 曲率失真分析
目前,关于立体图的讨论更多的是集中在观众的感知上,通过双目视差原理将人眼看到的两幅不同视角的视差图片在人脑中形成三维场景。而没有考虑来自立体图的光线是如何接近真实物体的光线这一问题。在传统全息图中,三维场景的波前由完整的振幅和相位信息重建,其中振幅和相位分别表示任何物体点的亮度和深度,而在全息体视图中,获得的二维视差图像不记录三维物体精确的相位信息,而是用一系列波前片段来近似真实的波前。可见当目标点不在投影平面上时,全息图重建过程中会出现波前误差,主要表现为离焦像差,离焦像差会导致波前幅值下降和相位变化,降低成像质量。
物点可能存在唯一的深度位置,使立体图发射出与投影平面相同形状的波前。对于任意狭缝间距,每个狭缝都可在屏幕的相同位置处观察到相同图像,因此全息图的狭缝结构不影响重建波前的形状。然而,如果一个物体点位于投影平面不同的深度位置,则无法保证由立体图产生波前的精度。
如
当物点
分析全息体视图的曲率失真问题,是以全息单元的中心作为观察点、以中点的波前近似整个全息单元的波前,当全息单元尺寸过大时,这种近似的误差很大,从而导致全息体视图再现质量下降,适当地减小全息单元尺寸可以让全息单元中心的波前与全息单元两侧的波前差异减小,使这种近似更加准确,从而提高全息体视图的再现质量。
4 实验与分析
在数模拟中,部分切割组合图片如
图 7. 不同参数条件下合成的有效视角图像。(a)茶壶倾斜角度为60°,全息单元尺寸为0.5 cm;(b)茶壶倾斜角度为60°,全息单元尺寸为0.2 cm;(c)茶壶倾斜角度为0°,全息单元尺寸为0.5 cm;(d)茶壶倾斜角度为0°,全息单元尺寸为0.2 cm
Fig. 7. Synthetic effective perspective images with different parameters. (a) Tilting angle of teapot is 60°, and holographic hogel size is 0.5 cm; (b) tilting angle of teapot is 60°, and holographic hogel size is 0.2 cm; (c) tilting angle of teapot is 0°, and holographic hogel size is 0.5 cm; (d) tilting angle of teapot is 0°, and holographic hogel size is 0.2 cm
图 8. 壶嘴和壶把细节部分放大对比。(a)(c)倾斜角度为60°;(b)(d)倾斜角度为0°
Fig. 8. Comparison of enlarged details of spout and handle of teapot. (a)(c) tilting angle of teapot is 60°; (b)(d) tilting angle of teapot is 0°
EPISM方法实验曝光打印光路如
采用如
分别进行了茶壶倾斜角度为0°和60°以及全息单元尺寸为0.2 cm和0.5 cm的4组两两对比实验,以此来验证前面的分析,由于物光与参考光之比远未达到1∶1,衍射效率低,发射全息图的白光再现效果不好,选择激光再现。
图 10. 再现像。(a)茶壶倾斜角度为60°,全息单元尺寸为0.5 cm;(b)茶壶倾斜角度为60°,全息单元尺寸为0.2 cm;(c)茶壶倾斜角度为0°,全息单元尺寸为0.5 cm;(d)茶壶倾斜角度为0°,全息单元尺寸为0.2 cm
Fig. 10. Reconstructed images. (a) Tilting angle of teapot is 60°, and holographic hogel size is 0.5 cm; (b) tilting angle of teapot is 60°, and holographic hogel size is 0.2 cm; (c) tilting angle of teapot is 0°, and holographic hogel size is 0.5 cm; (d) tilting angle of teapot is 0°, and holographic hogel size is 0.2 cm
可以看出
5 结论
简要介绍了EPISM打印方法,分析了该方法在实现不同场景深度再现时存在的再现质量较差的问题,主要研究了视觉跳变、衍射效应和曲率失真对再现质量造成的影响。全息单元尺寸过大时,再现像的视觉跳变问题将更加明显;在衍射效应方面,存在全息单元尺寸的极值,当全息单元尺寸为0.5 cm和0.2 cm时,全息单元尺寸为0.2 cm的全息单元极限分辨率低,成像效果要比全息单元尺寸为0.5 cm时好;通过分析曲率失真,可得物点远离投影平面将造成物点再现时模糊不清。对以上分析进行了对比实验验证,实验结果与理论分析一致,最终通过减小全息单元尺寸有效地提高了全息体视图较短场景深度的再现质量。
全息单元尺寸大小对全息体视图的再现质量影响较大,这还体现在衍射效应问题和频谱域的光学传递函数上,对于选择最佳的全息单元尺寸以及改善算法,提高EPISM方法打印的再现质量仍是下一步研究的方向。
[1] Kim S C, Dong X B, Kim E S. Accelerated one-step generation of full-color holographic videos using a color-tunable novel-look-up-table method for holographic three-dimensional television broadcasting[J]. Scientific Reports, 2015, 5: 14056.
[9] Blanche P A, Bigler C, Ka J W, et al. Fast and continuous recording of refreshable holographic stereograms[J]. Optical Engineering, 2018, 57(6): 061608.
[15] Halle MW. The generalized holographic stereogram[D]. Cambridge: Massachusetts Institute of Technology, 1991.
[18] Brotherton-RatcliffeD. Large format digital colour holograms produced using RGB pulsed laser technology[C]. Proceedings of the 7th International Symposium on Display Holography, 2006: 200- 208.
[20] YamaguchiM, HiguchiH, KojimaR, et al. Evaluation of light-ray reproducibility in full-parallax holographic stereogram[C]. Adaptive Optics: Analysis and Methods/Computational Optical Sensing and Imaging/Information Photonics/Signal Recovery and Synthesis Topical Meetings on CD-ROM, 2007: DTuA4.
[21] 黄应清, 赵锴, 蒋晓瑜, 等. 用波前平面提高全息体视图成像分辨率[J]. 中国激光, 2016, 43(2): 0209002.
[22] 裴闯, 蒋晓瑜, 闫兴鹏, 等. 采用视角切片法提高全息体视图再现视差图像分辨率[J]. 激光与光电子学进展, 2015, 52(9): 090901.
[24] Su J, Yan X P, Huang Y Q, et al. Progress in the synthetic holographic stereogram printing technique[J]. Applied Sciences, 2018, 8(6): 851.
陈祎贝, 闫兴鹏, 苏健, 张腾, 陈卓, 陈颂, 蒋晓瑜. 有效视差图像分割与重组的单步全息体视图打印方法[J]. 中国激光, 2019, 46(2): 0209002. Yibei Chen, Xingpeng Yan, Jian Su, Teng Zhang, Zhuo Chen, Song Chen, Xiaoyu Jiang. One-Step Holographic Stereogram Printing Method Based on Effectivel PerspectiveImages' Segmentation and Mosaicking Method[J]. Chinese Journal of Lasers, 2019, 46(2): 0209002.