2. 泉州师范学院 福建省先进微纳光子技术与器件重点实验室,福建 泉州 362000;
3. 泉州师范学院 福建省超精密光学工程技术与应用协同创新中心,福建 泉州 362000
2. Fujian Provincial Key Laboratory for Advanced Micro-nano Photonics Technology and Devices, Quanzhou 362000, China;
3. Fujian Provincial Collaborative Innovation Center for Ultra-Precision Optical Engineering and applications, Quanzhou 362000, China
机器视觉自动光学检测技术在光学与光电子器件等产品在线检测中具有广阔的应用前景[1-9]。迄今,已经被提出的半导体致冷晶粒双面(相邻或相对)同时成像检测装置与方法中,双面同时成像检测装置的光程差与检测系统的结构尺寸有关,当被检测晶粒结构尺寸较大时,为解决晶粒双面同时检测及其光程差(或离焦)产生的成像清晰度问题,检测装置需采用较大的直角转像棱镜与大景深远心成像镜头,由此给检测带来一定的局限性[10]。最近,一种半导体制冷器件晶粒相邻面同时“准”共焦成像检测的新方法得到了研究与验证[11]。该方法基于相邻双面的成像检测在立方合像棱镜上的“准”等光程成像原理,使相邻双面成像检测的光程差Δ与系统结构参数无关,只与晶粒相邻双面中心的间距有关。采用该方法的光学检测装置虽然实现了晶粒相邻面“准”等光程共焦成像检测,但是相邻双面成像之间仍然存在光程差Δ[11]。这个光程差Δ可以通过选择足够大景深的远心成像镜头来补偿,但是当被检测晶粒增大时,光程差Δ及物方视场也随之增大,必须使用大视场、大景深的远心成像镜头,相应地远心成像镜头的制造难度与成本会增加。因此,获得晶粒相邻面等光程共焦成像检测的新技术途径很有必要。偏振成像技术[12]与传统光电成像检测技术相比,不仅可获得被检测物体的强度信息,还可获得偏振度信息;不仅可以增加被检测物体的信息量,还可以简化检测装置的结构。随着偏振成像技术与偏振成像器件的发展,偏振成像检测技术及其应用得到广泛的研究[13-14]。本文提出了一种基于偏振分像的方法,利用偏振分束器与偏振传感器相机设计了用于半导体晶粒相邻两面同时等光程共焦偏振成像检测的新装置,实现了半导体晶粒相邻两面同时等光程共焦偏振成像检测。该检测装置具有等光程共焦偏振成像的特性,具有双面同时成像、清晰度好、成像光路共焦调整方便、检测装置结构简单可靠等优点,为检测设备性能的提高提供了新的方法。
1 检测装置原理图1所示为半导体制冷器件晶粒天面与侧面同时等光程共焦成像检测的光学装置。该检测装置在光学系统结构布局上类似传统的双光束等臂干涉仪系统,可以实现晶粒相邻双面的等光程共焦成像检测。该装置由特定的CMOS相机偏振传感器1,远心成像镜头2,偏振立方分束器/偏振立方合像器3,半导体晶粒4、透明玻璃载物转盘5、直角转像棱镜6a和6b、同轴外置照明光源7等构成。晶粒的照明光源7位于偏振立方分束器/合像器3的右侧,在照明光路中用作偏振分束的偏振立方分束器3在成像光路中的作用则为偏振立方合像器3。晶粒的天面经直角转像棱镜6a与偏振立方合像器3的90°反射后进入远心成像镜头2,半导体晶粒的侧面经直角转像棱镜6b与偏振立方合像器3的透射后也进入远心成像镜头2,且天面与侧面的像分别位于CMOS相机偏振传感器1中心的两侧。本检测装置采用了相邻双面的检测光路在偏振立方合像器3位置输出面上等光程共焦成像的原理,有相邻面的双像在偏振立方合像器3输出面时空间位置完全重合的特点,即满足晶粒双面等光程共焦成像条件 Δ =0。(必须指出,本文中,“等光程共焦”是指晶粒的相邻双面经过光学系统所形成的两个像位于同一个传感器平面上,而且空间上完全重合,与传统的共焦扫描成像显微镜中的“共焦”是不同的。)
|
1. CMOS相机偏振传感器;2. 远心成像镜头;3. 偏振立方分束器/合束器;4. 半导体晶粒;5. 玻璃载物转盘;6a. 直角转向棱镜;6b. 直角转向棱镜;7. 同轴外置照明光源 图 1 半导体制冷器件晶粒天面与侧面同时等光程共焦偏振成像检测的光学装置 Figure 1 Optical apparatus for simultaneously inspecting top and side surfaces defects of TEC components with polarization confocal imaging |
本装置中,半导体晶粒的双面照明光束的偏振方向互为垂直,照明光源经过偏振立方分束器3时,被分为两束线偏振光:一束透射线偏振光(transmission polarized,TP)经直角转像棱镜6a为待测晶粒的天面照明;另一束反射线偏振光(reflected polarized,RP)经直角转像棱镜6b为待测晶粒的侧面照明。半导体制冷器件晶粒相邻两面经过两线偏振成像光路后分别在CMOS相机偏振传感器1上形成双面各自独立的像。
在机器视觉光学检测装置中,通常使用的是同轴照明光源[1-2]。然而,同轴内置照明光源中所用的半透半反射立方分束器会导致照明光束的能量损失50%。晶粒的照明光经过立方合像器后,照度又会进一步被减少50%。因此,传统的同轴内置照明光源的能量利用率通常不超过25%。本文所提出的基于偏振分像的检测装置使用了偏振分束器,避免了常规的机器视觉光学检测装置中因照明光束经过半透半反射立方分束器所产生的50%的能量损失,其光能利用率比常规的利用同轴内置照明检测装置的高了一倍。
2 检测实验结果 2.1 实验装置设计基于偏振分像法获得晶粒相邻双面等光程共焦成像检测的原理,设计并搭建了晶粒相邻双面同时等光程共焦偏振成像的检测装置。该检测装置可以同时对晶粒的相邻两个面成像、检测缺陷。图2为半导体晶粒相邻双面等光程共焦偏振成像检测实验装置前置转像棱镜子系统光路。待测晶粒外形为长方体,其典型尺寸为2.10 mm×1.32 mm×1.32 mm。所设计和加工的直角转像棱镜尺寸为15 mm×15 mm×15 mm,偏振分束器尺寸为15 mm×15 mm×15 mm。本实验选用德鸿视觉的1.5倍远心成像镜头WTL110-1520。CMOS偏振相机采用的是凌云光技术集团有限责任公司供应的加拿大制造的FLIR BFS-U3-51S5P-C,该CMOS偏振相机的靶面大小为2/3´(17mm),像元大小为3.45 μm,分辨率为2 448 ×2 048。该偏振相机与普通CMOS相机不同之处是它集成了4个不同偏振探测特性的检偏器。偏振相机的传感器的功能结构如图3所示,图3(a)-(d)表示传感器分别由0°、45°、90°、135°四个偏振方向传感器单元组构成。这四个传感器单元分别探测并分别输出0°、45°、90°、135°四个偏振方向的像。
|
图 2 制冷器件晶粒双面等光程共焦偏振成像检测实验装置前置转像棱镜子系统光路 Figure 2 Illustration of prism relay system for the apparatus for inspecting adjacent surfaces defects of TEC components with equal-optical-path polarization imaging |
|
图 3 CMOS偏振相机传感器的结构示意 Figure 3 Illustration of configuration of CMOS polarization imaging sensor (polarization camera) |
利用偏振成像检测装置得到的半导体晶粒相邻两面成像检测结果如图4所示。图4(a)为0°偏振方向传感器单元对应晶粒侧面的像,图4(b)为90°偏振方向传感器单元对应晶粒天面的像,图4(c)和(d)为45°与135°偏振方向传感器单元对应晶粒侧面与天面的像的叠加。根据偏振光学原理,0°与90°偏振方向的光振幅也可以在45°与135°偏振方向上得到投影分量。由于晶粒相邻双面成像满足等光程共焦条件,晶粒相邻双面同时对焦,在偏振相机传感器面上可以同时获得晶粒天面与侧面的清晰成像。
|
图 4 制冷晶粒相邻两面等光程共焦偏振成像缺陷检测 Figure 4 Defect inspection of top and side surfaces of TEC components based on equal-optical-path polarization imaging |
对本装置进行调焦可以分别获得晶粒天面与侧面准共焦时、天面调焦而侧面离焦时的成像结果。当天面与侧面准共焦时,在相机的45°与135°传感器区同时得到晶粒天面与侧面的分开的像(像中心之间的间隔δ=1.62 mm)分别是0°与90°偏振方向的光振幅在45°与135°偏振方向上的投影分量。制冷晶粒相邻双面准共焦时偏振成像缺陷检测结果如图5所示,图5(a)-(d)分别为0°偏振方向单元(对应晶粒侧面的像)、90°偏振方向单元(对应晶粒天面的像)、45°与135°偏振方向单元(对应晶粒侧面与天面像的叠加)。在离远心成像镜头“等光程共焦物平面”前后相同间距范围内,晶粒相邻两个面的成像质量基本相同,但是清晰度明显降低了。图6为远心成像镜头对晶粒天面调焦而晶粒侧面离焦时晶粒相邻两个面的成像情况,物面离焦±0.54 mm。图6(a)-(d)分别为0°偏振方向单元(对应晶粒侧面的像)、90°偏振方向单元(对应晶粒天面的像)、45°与135°偏振方向单元(对应晶粒侧面与天面像的叠加),此时晶粒侧面的像完全模糊。为了定量说明等光程共焦成像与准共焦成像之间的差别,我们用光学镜头的鉴别率板测试了实验所用远心成像镜头分辨率随物面(鉴别率板)离焦的变化。实验结果表明:当物面在“等光程共焦面”上时,分辨率可高达114 lp/mm;而当物面离焦±0.20 mm时,分辨率则降低为32~45 lp/mm,此时晶粒侧面的像已经完全模糊不清。实验中,晶粒侧面成像时会同时存在一个对称的镜像,这个镜像是晶粒侧面经透明玻璃载物台的表面反射并经镜头后所成的实像。
|
图 5 制冷晶粒相邻双面准共焦时偏振成像缺陷检测(δ=1.62 mm) Figure 5 Defect inspection of top and side surfaces of TEC components with quasi-confocal imaging (δ=1.62 mm) |
|
图 6 制冷器件晶粒相邻面偏振成像缺陷检测:当天面调焦时(δ=1.62 mm) Figure 6 Defect inspection of top and side surfaces of TEC components when the top surface is focused (δ=1.62 mm) |
从上述分析可以得知,晶粒相邻双面等光程共焦偏振成像与准等光程(准共焦)成像之间的差异在于:在偏振相机的45°与135°偏振方向上是否可以得到晶粒相邻双面分离的像。当在偏振相机的45°与135°偏振方向上得到晶粒相邻双面完全重合的成像时,说明晶粒双面等光程共焦成像,否则,晶粒相邻双面为准等光程共焦成像。以此可以作为晶粒相邻双面偏振分离成像(0°与90°偏振方向)是否满足等光程共焦成像的判定依据与方法。另一方面,由于远心成像镜头具有一定的成像景深以及人眼分辨率的判定局限,如果只根据0°与90°偏振方向的双面成像清晰度,通常不易判定晶粒相邻双面是否完全等光程共焦成像。
3 结 论本文研究了一种基于偏振分像的半导体制冷器件晶粒相邻两面同时等光程共焦成像检测,设计并搭建了采用偏振分束器与偏振相机组成的晶粒相邻两面同时等光程共焦偏振成像检测的光学装置,完成了晶粒相邻两面同时等光程共焦偏振成像检测的实验验证。研究结果表明,该检测技术可以实现晶粒相邻两面同时偏振成像检测缺陷的功能,能很好地满足半导体晶粒相邻两面成像缺陷检测的性能要求。
| [1] | 卢荣胜, 吴昂, 张腾达, 等. 自动光学(视觉)检测技术及其在缺陷检测中的应用综述[J]. 光学学报, 2018, 38(8): 0815002. |
| [2] | 汤勃, 孔建益, 伍世虔. 机器视觉表面缺陷检测综述[J]. 中国图象图形学报, 2017, 22(12): 1640–1663. DOI:10.11834/jig.160623 |
| [3] | MAR N S S, YARLAGADDA P K D V, FOOKES C. Design and development of automatic visual inspection system for PCB manufacturing[J]. Robotics and Computer-Integrated Manufacturing, 2011, 27(5): 949–962. DOI:10.1016/j.rcim.2011.03.007 |
| [4] | NEOGI N, MOHANTA D K, DUTTA P K. Review of vision-based steel surface inspection systems[J]. EURASIP Journal on Image and Video Processing, 2014, 2014(1): 50. DOI:10.1186/1687-5281-2014-50 |
| [5] | YANG S W, LIN C S, LIN S K, et al. Automatic defect recognition of TFT array process using gray level co-occurrence matrix[J]. Optik, 2014, 125(11): 2671–2676. DOI:10.1016/j.ijleo.2013.11.070 |
| [6] | LIU Y, YU F H. Automatic inspection system of surface defects on optical IR-CUT filter based on machine vision[J]. Optics and Lasers in Engineering, 2014, 55: 243–257. DOI:10.1016/j.optlaseng.2013.11.013 |
| [7] | 毛翠丽, 卢荣胜, 董敬涛, 等. 相移条纹投影三维形貌测量技术综述[J]. 计量学报, 2018, 39(5): 628–640. DOI:10.3969/j.issn.1000-1158.2018.05.07 |
| [8] | 史艳琼, 卢荣胜, 张腾达. 液晶显示屏背光源模组表面缺陷自动光学检测系统设计[J]. 传感技术学报, 2015, 28(5): 768–773. DOI:10.3969/j.issn.1004-1699.2015.05.026 |
| [9] | 胡海兵, 徐挺, 张波, 等. OpenMP与环形缓冲技术在TFT-LCD缺陷检测中的应用[J]. 计算机科学, 2019, 46(S2): 562–566. |
| [10] | SU L L, WU P H, GUO Z W, et al. An optical apparatus for machine vision inspecting both top and bottom surfaces of the TEC components[C]//Proceedings of the SPIE 11338, AOPC 2019: Optical Sensing and Imaging Technology. Beijing: SPIE, 113383C. |
| [11] | 廖廷俤, 颜少彬, 段亚凡, 等. 制冷器件晶粒相邻面准共焦成像检测的光学装置[J]. 光学仪器, 2021, 43(5): 90–94. |
| [12] | JOHNSON J L. Infrared polarization signature feasibility tests[R]. U. S. Army Mobility Equipment Research and Development Center, 1974. |
| [13] | 刘敬, 夏润秋, 金伟其, 等. 基于斯托克斯矢量的偏振成像仪器及其进展[J]. 光学技术, 2013, 39(1): 56–62. |
| [14] | 刘敬, 金伟其, 王亚慧, 等. 双分离渥拉斯顿棱镜同时偏振成像系统设计[J]. 光学学报, 2015, 35(5): 0511001. |
2021, Vol. 43
Issue (6): 64-69

