偏振高光谱成像可以反映丰富的信息，在环境监测、生物诊断、食品安全等领域得到广泛应用。偏振成像主要基于傅里叶变换、像素化偏振器和压缩感知。目前，以上三种方法均可实现全斯托克斯偏振成像。其中，基于偏振调制阵列的傅里叶变换成像光谱偏振法（PMAFTISP）仅需一次采集即可获得全斯托克斯图像，PMAFTISP包括三个偏振调制阵列和三个独立的光学元件，系统复杂和信道串扰将影响成像质量。此外，像素化的全斯托克斯偏振计需要旋转偏振器或设计超表面，精密像素化器件的制造成本高、耗时长。而压缩全斯托克斯偏振仪仅由两个商用组件构成，提供了易于操作且节约时间的系统，通过四分之一波片（QWP）和液晶可调滤波器（LCTF）进行压缩，可以从两次测量中重建全斯托克斯图像。同时，利用延迟器后接具有分束作用的Wollaston棱镜，可以从一次测量中重建全斯托克斯图像。然而，上述压缩偏振仪都依赖于传统的重建方法，如两步迭代收缩/阈值（TwIST）算法，需要谨慎选择偏振参数和稀疏基。

       北京理工大学许廷发教授研究团队通过引入深度学习重建，开发了全斯托克斯单次压缩的偏振高光谱成像（DL-FSCPHI）系统。目标光的全斯托克斯图像由QWP与LCTF联合压缩到一次测量中，然后通过卷积神经网络（CNN）同时重建完整的斯托克斯图像。相关成果发表在Chinese Optics Letters第21卷第5期上(Axin Fan, et al. Deep learning reconstruction enables full-Stokes single compression in polarized hyperspectral imaging)，并被选为当期封面。

       封面主要体现了成像系统和神经网络两个部分，从上至下依次为成像目标、光源、四分之一波片、液晶可调滤波器、探测器、探测图像、第一层卷积层、第二层卷积层、全斯托克斯图像。

       DL-FSCPHI方法的总体原理图如图1所示，包括成像系统和偏振重建。成像系统主要由光源、QWP、LCTF和互补金属氧化物半导体（CMOS）探测器组成。目标光的偏振状态由四个斯托克斯参量组成的列向量表示，QWP和LCTF的偏振特性均用一个四行四列含16个元素的穆勒矩阵来描述，LCTF与QWP的穆勒矩阵相乘得到系统的穆勒矩阵。然后，将系统的穆勒矩阵与目标光的斯托克斯列向量相乘，得到调制光的斯托克斯列向量。调制后的第一斯托克斯参量代表总光强，最后由CMOS探测器测量。在此，固定QWP和LCTF的偏振角度，切换LCTF的中心波长，得到全斯托克斯单次压缩下目标的偏振高光谱图像。

图1 DL-FSCPHI方法总体原理图

       偏振重建包括模型训练和模型测试。首先，在Keras框架上构建由两个卷积层组成的CNN模型。第一层卷积层将一幅压缩图像扩展成多幅图像，第二层卷积层增强图像细节以预测全斯托克斯图像。然后，利用60个目标在18个光谱波段下具有400×400个空间像素的全斯托克斯图像和压缩图像训练模型，利用另外7个目标在18个光谱波段下同样具有400×400个空间像素的全斯托克斯图像和压缩图像测试模型。为了充分验证DL-FSCPHI方法的可靠性，设计了两个偏振角度、两种模型结构和两组训练参数。与典型TwIST算法相比，平均峰值信噪比（PSNR）和结构相似度（SSIM）值分别提高了13.55 dB和0.28。

       该项工作展示了全斯托克斯单次压缩和其他应用开发深度学习重建的巨大前景。未来，有必要研究一种更强大的通用模型，以广泛适用于不同的成像系统和不同的偏振角度。同时，该团队正在研究将深度学习重建扩展到四维压缩成像，包括一维偏振、一维光谱和二维空间压缩。

通讯作者简介

       许廷发，博士，教授/博导，北京理工大学校信息学部委员，国家一级重点学科“光学工程”学科责任教授，光电成像技术与系统教育部重点实验室副主任。北京理工大学重庆创新中心智能化和大数据技术实验室主任。近年来带领其科研团队围绕光电成像探测与识别、计算成像和人工智能等领域不断深化研究。主持承担国家自然科学基金委重大科研仪器研制项目等40余项。在国际、国内等系列期刊发表学术论文170余篇，其中被SCI/EI收录90余篇。以第一发明人申请国家发明专利45项，已授权和公示15项。指导研究生获得中国图象图形学学会优秀博士学位论文，二人次获得王大珩高校学生光学奖，二人次获得全国光学与光学工程博士生学术联赛全国百强，重庆英才创新创业示范团队等荣誉称号。

       李佳男，博士，北京理工大学光电学院预聘助理教授（特别副研究员），新加坡国立大学博士后。长期从事光电成像探测与识别工作。以第一作者发表IEEE TPAMI、CVPR等顶会顶刊论文11篇，ESI高被引论文1篇；以通讯作者发表IEEE TMI、NeurIPS等论文20余篇。论文单篇最高被引800余次，谷歌学术总引3500余次。主持国家自然科学基金青年科学基金等项目5项；入选中国科协“青年人才托举工程”，获得中国图象图形学学会优秀博士学位论文、王大珩高校学生光学奖、ImageNet国际大规模视觉识别挑战赛冠军等荣誉。指导研究生获得ICCV 2021“反无人机跟踪”挑战赛国际冠军及最佳论文奖、中国高等教育博览会“校企合作 双百计划”典型案例等。研究成果在“中国天眼”等国家重大科技基础设施中得到重要应用。

北京理工大学光电学院许廷发教授团队

科学编辑 |樊阿馨 北京理工大学

编辑 |刘校荣

推荐阅读：

[1].Editors’ Pick|基于深度学习的光场成像散射效应消除技术

[2].Weihao Wang, Xing Zhao, Zhixiang Jiang, Ya Wen. Deep learning-based scattering removal of light field imaging[J]. Chinese Optics Letters, 2022, 20(4): 041101.

[3].Sungchul Kim, Evgenii Kim, Eloise Anguluan, Jae Gwan Kim. Sample entropy analysis of laser speckle fluctuations to suppress motion artifact on blood flow monitoring[J]. Chinese Optics Letters, 2022, 20(1): 011702.

原文链接：https://mp.weixin.qq.com/s/l2qlYAVa3ktk40_fGZFt8w