用于多光谱语义分割的LBP特征增强神经网络 下载: 549次
A Neural Network for Multi-Spectral Semantic Segmentation Based on LBP Feature Enhancement
1 天津大学微电子学院, 天津 300072
2 天津市成像与感知微电子技术重点实验室, 天津 300072
图 & 表
图 1. LBP计算示意图
Fig. 1. Calculation diagram of LBP
下载图片 查看原文
图 2. LBP算法效果示意图。(a)原图;(b) LBP特征图
Fig. 2. Effect diagram of LBP algorithm. (a) Original image; (b) LBP feature image
下载图片 查看原文
图 3. LBP在神经网络中的计算方式
Fig. 3. LBP calculation method in neural network
下载图片 查看原文
图 4. LBP特征增强神经网络结构
Fig. 4. Structure of LBP feature enhancement neural network
下载图片 查看原文
图 5. LBPplus算法的示意图
Fig. 5. Schematic diagram of the LBPplus algorithm
下载图片 查看原文
图 6. RGB-Thermal数据集测试集部分可视化实验结果
Fig. 6. Some visual results of the testset from RGB-Thermal dataset
下载图片 查看原文
图 7. 更多细节的可视化结果
Fig. 7. More visual results in detail
下载图片 查看原文
表 1RGB-Thermal数据集测试结果
Table1. Test results on RGB-Thermal dataset%
Category | RTFNet50 (Acc/IoU) | MFNet (Acc/IoU) | FuseNet (Acc/IoU) | LBP34 (Acc/IoU) |
---|
Average | 50.3/43.5 | 41.1/36.5 | 51.6/47.1 | 60.7/51.9 | Car | 91.1/84.3 | 72.9/60.9 | 76.8/73.7 | 89.7/83.2 | Person | 76.4/66.1 | 60.2/53.4 | 67.7/62.4 | 74.2/65.7 | Bike | 67.4/55.8 | 54.4/43.13 | 65.6/54.5 | 72.3/59.4 | Curve | 60.1/42.4 | 26.3/22.9 | 48.5/40 | 57.6/41.5 | Car stop | 38.7/30.1 | 11.9/9.43 | 19.6/17.6 | 31.3/25.1 | Guardrail | 1.1/0.6 | 0/0 | 0/0 | 16.4/4.0 | Color cone | 4.11/3.11 | 20.3/18.8 | 41.8/34.3 | 50.9/45.9 | Bump | 14.5/11.4 | 25.2/23.5 | 45.2/43.7 | 54.6/44.3 |
|
查看原文
表 2RGB-Thermal数据集白天和夜晚图像测试结果
Table2. Test results on day and night images of RGB-Thermal dataset
Category | Day(Acc/IoU) | Night(Acc/IoU) |
---|
RTFNet50 | 49.3/41.7 | 47.4/41.6 | MFNet | 42.6/36.1 | 41.4/36.8 | FuseNet | 50.7/44.2 | 47.5/44.6 | LBP34 | 55.2/45.8 | 57.4/50.7 |
|
查看原文
史兴萍, 徐江涛, 蒋永唐, 秦书臻, 路凯歌. 用于多光谱语义分割的LBP特征增强神经网络[J]. 激光与光电子学进展, 2020, 57(14): 141004. Xingping Shi, Jiangtao Xu, Yongtang Jiang, Shuzhen Qin, Kaige Lu. A Neural Network for Multi-Spectral Semantic Segmentation Based on LBP Feature Enhancement[J]. Laser & Optoelectronics Progress, 2020, 57(14): 141004.