作者单位
摘要
1 贵州大学现代制造技术教育部重点实验室,贵州 贵阳 550025
2 重庆机电职业技术大学信息工程学院,重庆 402760
相比传统的三维重建方法,神经辐射场(NeRF)在隐式三维重建方面显示出了优异的性能,然而简单的多层感知机(MLP)模型在采样过程中缺乏局部信息,产生细节模糊的三维重建场景。为解决这一问题,提出一种基于MLP的多特征联合学习方法。首先,在NeRF嵌入层和采样层之间构造多特征联合学习(MFJL)模块,有效解码输入的多视图编码数据,补充MLP模型缺失的局部特征信息。然后,在NeRF采样层和推理层之间建立门控通道变换多层感知机(GCT-MLP)模块,学习高阶特征交互关系,并控制反馈给MLP层的信息流,实现对歧义特征的选择。实验结果表明:所提基于改进MLP的神经辐射场可以避免三维重建中的视图模糊和混叠现象;在Real Forward-Facing数据集部分场景上的平均峰值信噪比(PSNR)、结构相似度(SSIM)、学习感知图像块相似度(LPIPS)分别为28.08 dB、0.887、0.061;在Realistic Synthetic 360°数据集部分场景上的PSNR、SSIM、LPIPS分别为32.75 dB、0.960、0.026;在DTU数据集部分场景上的PSNR、SSIM、LPIPS分别为25.96 dB、0.807、0.208;与NeRF相比,具有更好的视图重建性能,并且在主观视觉效果上得到更加清晰的图像和细节纹理特征。
神经辐射场 多层感知机 联合学习 三维重建 
激光与光电子学进展
2024, 61(4): 0415004
张晓艳 1张宝华 1,2,*吕晓琪 2,3谷宇 1,2[ ... ]李建军 1,2
作者单位
摘要
1 内蒙古科技大学信息工程学院,内蒙古自治区 包头 014010
2 内蒙古自治区模式识别与智能图像处理重点实验室,内蒙古自治区 包头 014010
3 内蒙古工业大学信息工程学院,内蒙古自治区 呼和浩特 010051
在行人重识别任务中存在数据集标注难度大,样本量少,特征提取后细节特征缺失等问题。针对以上问题提出深度双重注意力的生成与判别联合学习的行人重识别。首先,构建联合学习框架,将判别模块嵌入生成模块,实现图像生成和判别端到端的训练,及时将生成图像反馈给判别模块,同时优化生成模块与判别模块。其次,通过相邻的通道注意力模块间连接和相邻空间注意力模块间连接,融合所有通道特征和空间特征,构建深度双重注意力模块,将其嵌入教师模型,使模型能更好地提取行人细节身份特征,提高模型识别能力。实验结果表明,该算法在Market-1501和DukeMTMC-ReID数据集上具有较好的鲁棒性、判别性。
行人重识别 图像生成 联合学习 注意力机制 深度学习 person re-identification image generative joint learning attention deep learning 
光电工程
2021, 48(5): 200388
王霞 1,2,*张为 1,2
作者单位
摘要
1 天津大学电气自动化与信息工程学院, 天津 300072
2 天津大学微电子学院, 天津 300072
建立了室内人员检测数据集(IHDD),提出了基于联合学习的多视角室内人员检测网络模型(MVNN)。该模型由输入数据层、特征提取层、可变形处理层、可见性估计层、分类判别层等组成,并加入区域建议模型和多视角模型以提升算法的检测性能。在自建的IHDD数据集上的实验结果表明,与现有其他检测算法相比,MVNN算法的检测率更高;在人体目标呈现多视角、多姿态及存在遮挡等困难情况下仍有不错的检测效果,具有一定的理论研究价值和实际应用价值。
图像处理 室内人员检测 卷积神经网络 多视角 联合学习 视频监控 
光学学报
2019, 39(2): 0210002

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!