大尺寸液晶面板获取精准缺陷坐标的研究与应用 下载: 507次
1 引言
薄膜晶体管液晶显示器(Thin Film Transistor Liquid Crystal Display,TFT-LCD)在生产制造中会产生各种类型的缺陷,如亮点、暗点、线缺陷、Particle Gap(由异物产生的晕开缺陷)、Mura(画面显示不均的缺陷)、显示异常、气泡等[1-3],其中,部分特定缺陷如亮点、线缺陷、Particle Gap可以通过维修进行修复以提升缺陷液晶面板的品质等级[4-8]。成盒后的液晶面板在液晶盒(Cell)检测站点进行检测以挑出有缺陷的液晶面板,其中可维修的液晶面板在维修之前,需提供缺陷精确坐标,而且提供缺陷精确坐标是可以实现自动维修的前提。
随着高世代线液晶面板的不断推出,液晶面板尺寸越来越大,分辨率不断提高,生产制造过程中对检测缺陷的准确度和速度要求也越来越高。目前,检测液晶面板缺陷的方法主要有人工视觉检测法、电学参数检测法和自动光学检测法,且自动光学检测法以其面板缺陷检测准确率髙,速度快,且是非接触检测的优点,已成为研究的热点[9-26]。Oh等人将方向滤波器组(Directional Filter Banks,DFB)和自适应多级阈值相结合,通过线扫描和面扫描获取不同分辨率的显示面板图像,采用DFB实现低分辨率图像的检测,将自适应多级阈值检测算法用于高分辨率图像检测[25]。欧先锋等提出一种基于全卷积神经网络结构的端对端快速TFT-LCD表面缺陷检测算法,利用深度学习强大的学习能力对缺陷点与非缺陷点进行像素级分类,在检测率、误检率以及时效性上都取得了显著效果[26]。但是,虽然液晶面板的缺陷检测方法得到了广泛的研究和应用,缺陷检测越来越准确,对于成盒后液晶面板缺陷的精准定位却很少提及。马岭等采用设计的自动分割与定位预处理软件将高分辨率图像划分成适于卷积神经网络学习的图像子块,并根据模型对图像子块判定类别和定位坐标,同时获取多类型缺陷检测结果[27],但此方法只适用于缺陷的检出和定位缺陷区域块,不能获取缺陷的精确坐标。目前,在液晶面板生产工厂中,液晶盒(Cell)检测站点传统的寻找缺陷坐标方案主要有两种:
第一种方案是人工视觉检测确认缺陷坐标。通过检测装置点灯检测出缺陷后,人工手动调整液晶面板自身显示的十字光标到缺陷位置,再通过人眼观察确认十字光标与缺陷是否重合来确认缺陷的坐标。但是在液晶面板越来越大、分辨率不断提高的趋势下,以某款1 651 mm (65 in)超高清(Ultra High Definition,UHD,分辨率:3 840×2 160 PPI)产品为例,1 440 mm宽的显示屏上单个亚像素的宽度只有127 μm,人工视觉确认坐标存在3个方面缺点:一是人员寻找缺陷速度慢,效率低,不能满足高速运行的自动化产线要求。二是人员确定缺陷坐标的精度差,人眼观察微米级别的缺陷,确认坐标偏差概率很高,会导致上传系统的缺陷坐标数值不准确,严重影响维修过程中缺陷位置查找和维修效率。而且如果维修时在上传缺陷坐标位置查找不到缺陷点的情况下,会将液晶面板进行再次点灯检测来重新上传缺陷坐标,浪费人力和物力。三是人员劳动强度大,工作环境会影响人员确认缺陷坐标的稳定性,导致坐标出现偏差。目前人工视觉方法只适用于小尺寸、低分辨率液晶面板的缺陷坐标寻找。
第二种方案是自动光学检测确认缺陷坐标。首先,自动光学检查机拍照并判断出液晶面板存在缺陷,然后计算缺陷在图片中的位置,最后通过图片与液晶面板显示区域长宽比例换算出缺陷在实际液晶面板的坐标。但此种方法适用于小尺寸、无形变液晶面板的缺陷坐标快速自动定位,在高世代线液晶面板制造中,液晶面板尺寸较大,未贴附偏光片的液晶面板竖直放置在检测机台上进行自动光学检查机检测,液晶面板在前后方向会有一定的弯曲形变,越靠近中心,前后弯曲的形变量越大,此种通过图片比例计算的方法来确定缺陷实际坐标不够精确,无法保证坐标精度。而且液晶面板尺寸越大,形变量越大,通过图片比例换算得到的缺陷坐标误差就越大,无法满足缺陷维修坐标精度的要求。因此,自动光学检测确认缺陷坐标的方法无法在企业大尺寸液晶面板精准获取缺陷坐标工艺上得到应用。
因为液晶面板尺寸较大、分辨率高,在检测机台上会发生形变等问题,传统人工视觉或自动光学检测寻找缺陷坐标法存在效率低、精度差等缺点,难以满足企业当前的生产需求。H公司在量产初期缺陷发生率较高,如果因人工视觉或自动光学检测寻找缺陷坐标方式的坐标误差导致维修失败,每年损失可达数千万元。同时,在智能制造的大环境下,高世代线大尺寸液晶面板的制造领域自动化程度越来越高,利用智能缺陷检出系统自动检出液晶面板缺陷及其坐标成为一种趋势。为了减少因坐标误差导致的维修失败损失,提升缺陷寻址准确率和效率,而且为了克服大尺寸液晶面板在检测机台上的形变问题,本文对大尺寸液晶面板精准获取缺陷坐标的方法进行了研究,创新性地设计出一种可以自动寻找大尺寸液晶面板中缺陷精确坐标的系统。本文对该系统的硬件和软件实施架构,常见的亮点缺陷、Data Open(数据线显示区内断开形成的线缺陷)、X-line(数据线起始端断开形成的线缺陷)、Data Gate Short(数据线和扫描线显示区内短路形成的线缺陷)线缺陷和Particle Gap缺陷的自动定址逻辑进行了阐述。最后,对5种液晶面板缺陷进行自动定址实际测试,并与传统缺陷坐标寻找方法进行了对比。
2 缺陷自动定址系统的建立
2.1 系统硬件实施方式
缺陷自动定址系统硬件实施方式如
图 2. 缺陷自动定址系统软件实施方式示意图
Fig. 2. Software implementation scheme of defect automatic addressing system
2.2 系统软件实施方式
缺陷自动定址系统软件实施方式如
图 1. 缺陷自动定址系统硬件实施方式示意图
Fig. 1. Hardware implementation scheme of defect automatic addressing system
第一步,寻址系统中控机从数据库系统下载对应液晶面板的缺陷信息,包含缺陷数量、缺陷类型、缺陷检出画面及其对应的初始坐标(X0,Y0),该初始坐标为人员(
图 3. 人工视觉检测确认缺陷初始坐标示意图
Fig. 3. Scheme of manual visual detection and confirmation of defect initial coordinates
图 4. 自动光学检测确认缺陷初始坐标示意图
Fig. 4. Scheme of automatic optical detection and confirmation of defect initial coordinates
第二步,寻址系统中控机读取液晶面板一个缺陷信息后,通知PG提供信号将液晶面板进行点亮,且显示为缺陷被检出画面。然后寻址系统中控机控制移动相机到液晶面板的初始坐标前方,再通过图像拍摄装置拍照确认是否真实存在缺陷,若不存在则读取下一个缺陷信息,若存在则继续寻找精确缺陷坐标。
第三步,确认缺陷存在后,根据从数据库系统下载的缺陷初始坐标(X0,Y0)显示出空心十字光标,空心十字光标的中心坐标即为(X0,Y0)。然后相机拍照,再根据不同类型缺陷制定的缺陷定址逻辑来判断空心十字光标与缺陷是否重合。
第四步,如果确认缺陷与空心十字光标不重合,则通过图片计算出缺陷相对于空心十字光标的偏移量,换算成十字光标需要移动的横向(X方向)距离m和竖向(Y方向)距离n,然后通知PG将空心十字光标按照m和n的数值进行X和Y方向的移动。空心十字光标移动完成后,再进行拍照确认缺陷是否与空心十字光标重合。如果不重合则重复循环本步骤上述内容,直到确认空心十字光标与缺陷位置完全重合,即空心十字光标与缺陷X和Y方向的偏移量为(0,0)。
第五步,确认缺陷与空心十字光标重合后,寻址系统中控机从PG读取此时的空心十字光标坐标(X1,Y1),将此坐标信息作为缺陷精准真实坐标上传到数据库系统。
第六步,确认此液晶面板是否还有其他缺陷信息,如果有则继续执行第二步至第五步的操作,直到将所有缺陷坐标寻找并上传完毕,然后将相机移动归位,结束此液晶面板的缺陷寻址流程。
此系统软件实施方式没有采用与自动光学检测类似的通过拍照的图片换算比例直接计算出缺陷坐标的方法,而是通过空心十字光标的设计、缺陷识别和定址逻辑的制定,最后通过液晶面板驱动装置输出的十字光标坐标作为缺陷坐标的系统设计,彻底克服了大尺寸液晶面板在检测机台上的形变问题。通过PG直接输出缺陷的精准坐标,后续维修过程可以通过数据库系统迅速准确地找到缺陷的精确位置从而进行修复。
3 缺陷精确坐标定址逻辑
在确定自动寻找大尺寸液晶面板缺陷精确坐标的硬件和软件设计及实施方式后,本文对大尺寸液晶面板发生率较高的5种缺陷定址逻辑进行了阐述,分别为亮点缺陷、Data Open、X-line、Data Gate Short线缺陷和Particle Gap五种缺陷的自动定址逻辑。
3.1 亮点缺陷定址逻辑
亮点缺陷是液晶面板最常见的缺陷。在阵列和成盒段制造过程中,都会产生亮点缺陷。亮点缺陷的维修手法已经很成熟,并形成了完全自动维修的修复方式,因此提供亮点缺陷的精准坐标尤为重要,是保证维修成功的重要前提。
当液晶面板存在亮点缺陷时,在特定检测画面下,相机拍摄的液晶面板上面显示的亮点缺陷画面如
图 5. (a)亮点缺陷画面;(b)十字光标与亮点缺陷非重合画面;(c)十字光标与亮点缺陷重合画面。
Fig. 5. (a)Defect image of pixel;(b)Image of cross cursor non-coincided with pixel;(c)Image of cross cursor coincided with pixel.
3.2 Data Open缺陷定址逻辑
Date Open缺陷常发生于阵列工艺制程,是由于显示区域内TFT的数据线出现断路形成的线缺陷,从断点开始,液晶面板下方TFT无法供电,液晶分子无法偏转,宏观现象是一条不贯穿的黑线。
当液晶面板存在Date Open缺陷时,以Z-inversion TFT 设计(一根数据线隔行翻转控制两列像素,如
图 7. (a)Date Open缺陷画面;(b)十字光标与Date Open缺陷非重合画面;(c)Date Open缺陷在图片上的计算坐标示意图;(d)十字光标在图片上的计算坐标示意图;(e)十字光标与Date Open缺陷重合画面。
Fig. 7. (a)Defect image of Data Open;(b)Image of cross cursor non-coincided with Data Open;(c)Diagram of the calculated coordinate of Date Open defect on the picture;(d)Diagram of the calculated coordinates of the cross cursor on the picture;(e)Image of cross cursor coincided with Data Open.
3.3 X-line缺陷定址逻辑
X-line缺陷的发生常见于阵列工艺制程,也可能发生在成盒工艺制程,是由于数据线的起始段出现异常,导致整条数据线都无法输入电压,与之关联的像素都呈现黑色。
当液晶面板存在X-line缺陷时,在特定检测画面下,相机拍摄的X-line缺陷画面如
图 8. (a)X-line缺陷画面;(b)十字光标与X-line缺陷非重合画面;(c)十字光标与X-line缺陷重合画面。
Fig. 8. (a)Defect image of X-line;(b)Image of cross cursor non-coincided with X-line;(c)Image of cross cursor coincided with X-line.
3.4 Data Gate Short缺陷定址逻辑
液晶面板Data Gate Short缺陷常发生于阵列工艺制程,由于数据线和扫描线短路造成电压异常,宏观上显示在短路点形成交叉且竖向贯穿、横向渐变的十字线。Data Gate Short缺陷的维修就需要定位到数据线和扫描线短路点后再进行相应的维修工艺。
当液晶面板存在Data Gate Short缺陷时,在特定检测画面下,相机拍摄的液晶面板上面显示的Data Gate Short缺陷画面如
图 9. (a)Data Gate Short缺陷画面;(b)十字光标与Data Gate Short缺陷非重合画面;(c)十字光标与Data Gate Short缺陷重合画面。
Fig. 9. (a)Defect image of Data Gate Short;(b)Image of cross cursor non-coincided with Data Gate Short;(c)Image of cross cursor coincided Data Gate Short.
3.5 Particle Gap缺陷定址逻辑
Particle Gap缺陷常发生于成盒工艺制程,是由于异物(Particle)在两层玻璃基板中间造成了盒厚的变化形成带有光晕的缺陷,并且缺陷中间有发亮的异物。在维修Particle Gap缺陷时,只需提供Particle Gap中间异物的坐标。
当液晶面板存在Particle Gap缺陷时,在特定检测画面下,相机拍摄的Particle Gap缺陷如
图 10. (a)Particle Gap缺陷画面;(b)十字光标与Particle Gap缺陷非重合画面;(c)十字光标与Particle Gap缺陷重合画面。
Fig. 10. (a)Defect image of Particle Gap;(b)Image of cross cursor non-coincided with Particle Gap;(c)Image of cross cursor coincided Particle Gap.
4 缺陷自动定址系统测试
在H工厂对含有5种类型缺陷的1 651 mm(65 in)和1 905 mm(75 in)UHD液晶面板进行自动定址系统及寻址逻辑的测试,两种尺寸产品各测试1 000张,结果如
同时,将缺陷自动定址系统与H工厂生产初期使用的传统人工视觉和自动光学检查机在1 651 mm(65 in)UHD液晶面板缺陷定址的效率与准确性进行对比,如
表 1. 缺陷寻址测试准确率结果
Table 1. Accuracy results of defect addressing
|
表 2. 缺陷定址方法对比
Table 2. Comparison of defect addressing methods
|
5 结论
本文针对高世代线的大尺寸、高分辨率液晶面板采用传统人工视觉或自动光学检查机进行缺陷定址因效率低、精度差等原因导致维修失败的问题进行了分析,创新性地设计出一种可以自动获取大尺寸液晶面板中缺陷精确坐标的系统,并阐述了缺陷自动定址系统的硬件和软件实施方式。对5种液晶面板中常见缺陷建立了缺陷识别和定址逻辑,并对每种缺陷自动定址进行了实际测试,每种缺陷测试共有1 651 mm(65 in)和1 905 mm(75 in)UHD液晶面板各1 000张,并与传统缺陷坐标定址方法进行了对比。测试及对比结果表明,该系统稳定易用,具有全自动、识别速度快和100%精确寻址等优点。目前,该系统应用于H公司缺陷坐标寻址工序后,缺陷坐标上传效率显著提高,并且缺陷坐标准确性提升30%以上,缺陷维修收益显著提升,表明该缺陷自动定址系统在大尺寸液晶面板缺陷维修坐标寻址领域具有重大应用价值。
[1] 马群刚. TFT-LCD原理与设计. 谢文郁,译 [M].北京: 电子工业出版社, 2011.
MAQ G. TFT -LCD Principle and Design [M]. Beijing: Publishing House of Electronics Industry, 2011. (in Chinese)
[2] 简川霞. TFT-LCD表面缺陷检测方法综述[J]. 电视技术, 2015, 39(9): 146-152.
JIAN C X. Review of TFT-LCD surface defect detection methods[J]. Video Engineering, 2015, 39(9): 146-152.
[4] 黄雅纹, 陈再良. TFT LCD常见点缺陷的检测与修复[J]. 现代电子技术, 2012, 35(23): 189-191.
[5] 蒋耀华, 陈思. 黑矩阵遮挡法修复液晶显示屏亮点成功率的研究[J]. 现代显示, 2013(5): 10-12.
[6] 吴国东, 乔律华, 韩海滨, 等. ITO区黑化法修复亮点理论模型及工艺参数分析[J]. 液晶与显示, 2021, 36(2): 246-257.
[7] 齐铮. TFT-LCD显示面板制成工艺中的阵列缺陷检测方法研究[D]. 西安: 西安电子科技大学, 2011.
QIZ. TFT-LCD display panel array defect detection method research[D]. Xi’an: Xidian University, 2011. (in Chinese)
[8] 韩磊, 魏平玉, 周春霖, 等. 晕开不良修复方法及影响因素的研究[J]. 液晶与显示, 2017, 32(2): 110-116.
[9] 刘晓源. TFT-LCD的驱动电路设计与面板缺陷检测[D]. 哈尔滨: 哈尔滨理工大学, 2020.
LIUX Y. Driving circuit design and panel defect detection of TFT-LCD[D]. Harbin: Harbin University of Science and Technology, 2020. (in Chinese)
[10] 冯小波, 贺臻, 施旭. 机器视觉在TFT-LCD点缺陷检测系统中的应用[J]. 现代显示, 2011(9): 16-21.
[11] 李传乐. TFT-LCD缺陷检测系统中的图像处理[D]. 长春: 吉林大学, 2016.
LIC L. The image processing in TFT-LCD defect detection system[D]. Changchun: Jilin University, 2016. (in Chinese)
[15] 陈良敏. 基于机器视觉的Mura缺陷检测和分类方法研究[D]. 上海: 上海交通大学, 2017.
CHENL M. Detection and classification of Mura defect for TFT-LCD based on computer vision[D]. Shanghai: Shanghai Jiao Tong University, 2017. (in Chinese)
[16] 朱恒川. 基于机器视觉的液晶屏缺陷检测[D]. 成都: 电子科技大学, 2018.
ZHUH C. Defect detection in LCD screen based on machine vision[D]. Chengdu: University of Electronic Science and Technology of China, 2018. (in Chinese)
[17] 蒋莉, 严军, 孟伟, 等. 基于形态学的点阵液晶屏缺陷检测方法的研究[J]. 电子测量技术, 2018, 41(16): 98-101.
JIANG L, YAN J, MENG W, et al. Research on defect detection methods of dot-matrix LCD based on morphology[J]. Electronic Measurement Technology, 2018, 41(16): 98-101.
[18] 张腾达, 卢荣胜, 张书真. 基于二维DFT的TFT-LCD平板表面缺陷检测[J]. 光电工程, 2016, 43(3): 7-15.
[23] 崔禹. 多背景环境下TFT-LCD视觉缺陷检测算法研究与应用[D]. 昆明: 昆明理工大学, 2021.
CUIY. Research and application of TFT-LCD visual defect detection algorithm in multi-background environment[D]. Kunming: Kunming University of Science and Technology, 2021. (in Chinese)
[26] 欧先锋, 晏鹏程, 向灿群, 等. 基于FCN的TFT-LCD表面缺陷快速检测算法[J]. 成都工业学院学报, 2017, 20(3): 6-10.
OU X F, YAN P C, XIANG C Q, et al. Fast detection algorithm for TFT-LCD surface defects based on the full convolution neural networks[J]. Journal of Chengdu Technological University, 2017, 20(3): 6-10.
[27] 马岭, 鲁越, 蒋慧琴, 等. 基于小样本学习的LCD产品缺陷自动检测方法[J]. 智能系统学报, 2020, 15(3): 560-567.
Article Outline
张俊, 朱忠发, 周进, 刘成, 索金亮, 王彬, 黄助兵. 大尺寸液晶面板获取精准缺陷坐标的研究与应用[J]. 液晶与显示, 2022, 37(12): 1561. Jun ZHANG, Zhong-fa ZHU, Jin ZHOU, Cheng LIU, Jin-liang SUO, Bin WANG, Zhu-bing HUANG. Research and application of detecting accurate defect coordinates for large size LCD panel[J]. Chinese Journal of Liquid Crystals and Displays, 2022, 37(12): 1561.