激光与光电子学进展
2023, 60(16): 1615003
西安应用光学研究所 智能感知实验室,陕西 西安 710065
DETR(detection transformer)算法是一个基于Transformer的目标检测算法,具有检测速度快、检测效果好的优势。介绍了一种利用DETR算法及双目视觉原理对道路环境下的人、车、自行车、信号灯等目标进行构建的测量系统。分析了双目测距、相机标定、目标检测以及目标匹配的原理,并以此为基础构建了测量系统。采用目标检测算法检测视野中的目标,利用双目视觉原理对检测到的目标进行测距,同时分析了测量系统中测量误差的来源,并计算其对结果的影响。该算法在KITTI数据集及现实环境中进行测试,测量系统基线为45 cm,对15 m~80 m的指定目标检出率高于90.6%,测距误差小于5.8%,在RTX 2080Ti平台上能够实时运行。
双目视觉 目标检测 测量系统 测量误差 binocular vision target detection measurement system measurement error
上海理工大学 光电信息与计算机工程学院,上海 200093
为了解决短基线双目内窥成像系统获得的视频图像在裸眼3D显示设备中观看到的视频纵深感和立体感较弱的问题,通过分析双目内窥镜的参数以及立体视频中图像对的视差,提出了基于短基线双目内窥成像系统的立体视频校正和视差调整方法。首先,对采用的双目结构内窥系统进行相机标定,获取各相机参数和相机间的位置参数;其次,利用获得的参数进行相机视频校正,再针对裸眼3D显示设备对视频源的参数要求进行图像对的视差调整,最终获得符合裸眼3D立体显示设备要求并适合人眼观看的双目内窥系统实时显示立体视频。通过实验验证了方法的可行性,实际搭建了一套基线距离为8 mm的短基线双目内窥成像系统,原始视差范围(0,64)像素,经视差调整后达到(−30, 30)像素,双路并行视频处理25 帧/s并实时显示。与实验室设计的裸眼3D立体显示系统匹配,可实现具有明显立体感的医用内窥镜实时裸眼3D成像。
图像处理 双目视觉 立体视频 视频校正 image processing binocular vision stereo video video correction
光学 精密工程
2023, 31(12): 1793
激光与光电子学进展
2023, 60(14): 1415002
1 湖北工业大学机械工程学院,湖北 武汉 430068
2 现代制造质量工程湖北省重点实验室,湖北 武汉 430068
印刷电路板上连接PIN正位度检测是保证PCB电气可靠性的重要环节,其主要检测PIN缺针、共线度与高度。为满足生产实际需求,提出一种基于双目视觉的连接PIN正位度检测方法。首先,通过双目标定获取相机内外参数,实现图像立体校正;其次,根据先验的相对方位和给定的排列信息生成相应的栅格,基于栅格灰度阈值变化进行PIN缺失检测;然后,分别提取PIN在两个相机视野中对应的特征角点,基于视差原理进行针尖三维坐标计算,实现对PIN的排列共线度检测;最后,提出了基于特征提取的PIN相对高度检测方法,实现了对PIN的相对高度检测。实验结果验证了所提方法的有效性,PIN相对高度检测的平均耗时为125.4 ms,精度达99.535%,重复性精度在±0.05 mm内。
双目视觉 PIN 正位度检测 视差 图像处理 binocular vision PIN position detection disparity image processing 激光与光电子学进展
2023, 60(14): 1415004
光学学报
2023, 43(13): 1333001
1 桂林电子科技大学, a.广西精密导航技术与应用重点实验室
2 b.信息与通信学院, 广西 桂林 541000
3 卫星导航定位与位置服务国家地方联合工程研究中心, 广西 桂林 541000
无人机对目标进行测距时, 其算法的实时性和准确性一直是研究的重点。针对算法的实时性, 提出双向搜索策略以及采用三条数据流并行处理实现GPU加速, 并引入蝶形排序算法, 提高了运算效率; 针对算法的准确性, 提出改进AD算法与改进Census算法融合, 有效地解决了算法过度依赖中心像素的问题; 为了降低算法复杂度, 在基于背景差法的目标检测中引入移动平均算法; 针对无人机平台存储空间有限, 提出存储数据优化方案, 减少了数据的占用空间。在Middlebury数据集下与BM算法、SGBM算法进行对比实验, 采集室外场景与BM算法进行测距性能对比, 最后实现室外无人机测距。通过大量实验数据验证了所提算法可满足无人机实时测距的高精度要求。
无人机 双目视觉 双向搜索 蝶形算法 移动平均算法 UAV binocular vision two-way search butterfly algorithm moving average algorithm
激光与光电子学进展
2023, 60(12): 1215004
红外与激光工程
2023, 52(3): 20220574