1. 常见困惑在工业检测现场经常能看到这样的场景一块玻璃、一片晶圆、一段光学镜片肉眼看上去光洁如新但质检员把它放到显微镜下再换几个不同角度的光源照一照屏幕上立刻浮现出一道道细密的划痕。很多刚接触机器视觉的朋友会问两个问题划痕那么细为什么非要上高倍显微镜普通工业相机不行吗划痕明明是透明的、几乎看不见为什么换个角度的光就能照出来这两个问题的答案其实都指向同一个物理事实透明划痕本身不产生颜色和亮度差异它只改变光的传播方向。想让它显形就必须在空间分辨率和光照几何上做文章。2. 划痕本质2.1 形貌损伤很多人下意识把划痕理解成表面附着了一条异物。实际上透明材料玻璃、亚克力、蓝宝石、光学镀膜上的划痕是材料被硬物刮擦后留下的沟槽或隆起它的成分和周围完全一样。也就是说划痕区域和完好区域的材料相同两者的反射率、透射率、颜色几乎一致唯一的区别是微观几何形状——多了一道凹槽、一道凸脊或者一片粗糙的断裂面。2.2 隐没成因在均匀的正面照明下光线垂直打在表面上划痕的凹槽底部和周围平面接收到几乎相同的光强反射回相机的光也几乎相同。相机看到的是一片均匀的灰对比度接近于零。用信号的语言说划痕在亮度这个维度上几乎没有信号它只存在于方向这个维度里。而普通成像恰恰把方向信息丢掉了——它只记录每个像素收到多少光不记录光从哪个方向来。这就是问题的根源也是后面所有技术手段的出发点。3. 显微成像3.1 分辨率先看一组量级感缺陷类型典型横向尺寸肉眼可见的明显划伤50–200 μm精密光学元件划痕1–10 μm晶圆表面微划痕0.1–1 μm纳米级划伤超精密加工 100 nm而一个普通工业相机的成像分辨率取决于镜头放大倍率和传感器像元尺寸。假设用 500 万像素、2.3 μm 像元的传感器配 0.5 倍镜头单个像元对应的物方尺寸约为 4.6 μm。这意味着一条 1 μm 宽的划痕在图像上连一个像素都占不满它会被平均进相邻像素里直接消失。光学系统的极限分辨率由衍射决定可用瑞利判据粗略估计d0.61λNA d \frac{0.61 \lambda}{NA}dNA0.61λ其中 λ 为波长NA 为数值孔径。可见光 λ≈0.5 μm普通低倍镜头 NA 约 0.05算下来极限分辨率约 6 μm而高倍显微物镜 NA 可达 0.5–0.9极限分辨率能到 0.3–0.6 μm。这就是为什么必须上高倍显微镜——不是看得更清楚这么简单而是低倍系统在物理上就无法分辨微米级划痕。3.2 视场取舍高倍显微镜的代价是视场变小。10 倍物镜视场约 2 mm50 倍只有 0.4 mm 左右。所以实际产线上常见两种做法高倍 扫描拼接用高倍物镜逐区域拍摄再拼接成全片图像适合抽检或小尺寸高价值元件高倍 自动对焦 高速运动平台边走边拍兼顾分辨率与节拍。3.3 景深划痕有深度。高倍物镜的景深很浅50 倍物镜景深可能只有 1–2 μm而一道划痕的深度往往也是微米级。如果焦面没对准沟槽划痕就会模糊。因此高倍显微成像通常要配合自动对焦或焦点堆栈focus stacking把不同焦面的图像合成一张全清晰的图。4. 多角度的光4.1 核心原理回到第 2 节的结论划痕不改变亮度只改变方向。那么只要让照明光的方向刁钻一点让完好平面和划痕把光反射到不同方向相机就能看到差异。这里涉及两个基本光学行为镜面反射光滑平面把光按入射角等于反射角的规律反射出去方向集中散射/偏折划痕的沟槽壁、粗糙断面会把光打散到各个方向或者让光发生偏折。于是只要让相机看不到完好平面的镜面反射光而看得到划痕的散射光划痕就会在暗背景上亮起来。这就是暗场照明的本质。4.2 明场照明明场是最直观的方式光源和相机大致同侧光照射样品后直接反射或透射进入镜头。优点成像均匀、色彩真实、适合观察整体轮廓、大缺陷、脏污、异物缺点对透明划痕这种只改方向不改亮度的缺陷对比度极低。明场适合回答这个零件整体长什么样但不适合回答表面有没有微划痕。4.3 暗场照明暗场照明的做法是把光源放在相机接收不到镜面反射光的角度上。完好平面光按镜面反射方向跑掉了进不了镜头 → 画面黑划痕沟槽光被沟槽壁散射到各个方向其中一部分进入镜头 → 划痕亮。结果就是黑背景上一条条发亮的划痕对比度极高。这也是为什么暗场几乎是透明材料表面缺陷检测的标配。暗场还分两种明场暗场brightfield/darkfield 组合同一工位切换两种照明先明场定位整体再暗场找微缺陷环形暗场 / 低角度暗场用环形光源以很低的角度掠射表面对浅划痕、麻点特别敏感。4.4 多向补光单一角度的光只能让某一类取向的划痕显形。划痕是有方向的横向划痕、纵向划痕、斜向划痕它们的沟槽壁朝向不同对同一束光的散射效率也不同。光从左侧来可能让竖直方向的划痕很亮横向划痕却很暗换成从上方来亮的划痕方向就变了。所以工程上常用多角度光源如四象限环形光、多角度穹顶光、可编程光源依次点亮不同方向或者同时点亮做合成。这样无论划痕朝哪个方向总有一个角度能把它照出来。4.5 偏振光对于高反光、透明材料还可以在光源前加偏振片、镜头前加检偏器。完好平面的镜面反射会保持偏振态可以被检偏器挡掉而划痕的散射会改变偏振态部分光能穿过检偏器。这样背景更暗、划痕更亮信噪比进一步提升。5. 成像链路下面用一张流程图概括从看不见到看得见的完整思路明场暗场多角度偏振透明划痕样品照明方式选择整体形貌/大缺陷微划痕/浅划痕不同取向划痕压制镜面背景高倍显微物镜自动对焦/焦点堆栈高分辨率相机图像处理: 增强/分割/分类缺陷判定与定位可以看到高倍显微镜解决分辨得出多角度光照解决看得见两者缺一不可只有高倍、没有合适光照分辨率够了但划痕和背景一样灰图像里依然找不到只有光照、没有高倍划痕亮了但宽度不足一个像素亮斑被平均掉依然测不准。6. 工程要点6.1 光源调试暗场角度没有万能公式和材料折射率、划痕深度、物镜工作距离都有关。实际调试时通常从低角度掠射开始逐步抬高观察对比度变化找到信噪比最高的角度。6.2 光源与物镜的干涉高倍物镜工作距离很短几十倍物镜可能只有几毫米环形光源、同轴光源的安装空间受限。这时常改用物镜内同轴照明或光纤导光的小型暗场环。6.3 运动拖影高倍下视场小平台运动速度稍快就会拖影。需要根据曝光时间和运动速度匹配必要时用频闪光源冻结运动。6.4 算法边界很多人指望靠算法把模糊的划痕算出来。但如果光学上就没采集到对比度算法也无能为力。成像质量决定了信息上限算法只能逼近这个上限。先把光照和分辨率做对再谈增强和分割。7. 小结回到最初的两个问题为什么要高倍显微镜因为划痕宽度常在微米甚至亚微米级低倍光学系统受衍射极限限制物理上就分辨不出来。高倍物镜用更大的数值孔径把极限分辨率压到亚微米才能让划痕占据足够多的像素。为什么要用不同角度的光因为透明划痕不改变亮度只改变光的传播方向。明场看整体暗场让划痕散射的光在暗背景上显形多角度覆盖不同取向的划痕偏振进一步压制背景。一句话总结透明划痕检测本质是一场把方向信息翻译成亮度信息的游戏。高倍显微镜负责把空间信息留住多角度光照负责把方向信息显影二者配合才能让那些肉眼看不见的划痕在屏幕上无所遁形。
1. 常见困惑在工业检测现场经常能看到这样的场景一块玻璃、一片晶圆、一段光学镜片肉眼看上去光洁如新但质检员把它放到显微镜下再换几个不同角度的光源照一照屏幕上立刻浮现出一道道细密的划痕。很多刚接触机器视觉的朋友会问两个问题划痕那么细为什么非要上高倍显微镜普通工业相机不行吗划痕明明是透明的、几乎看不见为什么换个角度的光就能照出来这两个问题的答案其实都指向同一个物理事实透明划痕本身不产生颜色和亮度差异它只改变光的传播方向。想让它显形就必须在空间分辨率和光照几何上做文章。2. 划痕本质2.1 形貌损伤很多人下意识把划痕理解成表面附着了一条异物。实际上透明材料玻璃、亚克力、蓝宝石、光学镀膜上的划痕是材料被硬物刮擦后留下的沟槽或隆起它的成分和周围完全一样。也就是说划痕区域和完好区域的材料相同两者的反射率、透射率、颜色几乎一致唯一的区别是微观几何形状——多了一道凹槽、一道凸脊或者一片粗糙的断裂面。2.2 隐没成因在均匀的正面照明下光线垂直打在表面上划痕的凹槽底部和周围平面接收到几乎相同的光强反射回相机的光也几乎相同。相机看到的是一片均匀的灰对比度接近于零。用信号的语言说划痕在亮度这个维度上几乎没有信号它只存在于方向这个维度里。而普通成像恰恰把方向信息丢掉了——它只记录每个像素收到多少光不记录光从哪个方向来。这就是问题的根源也是后面所有技术手段的出发点。3. 显微成像3.1 分辨率先看一组量级感缺陷类型典型横向尺寸肉眼可见的明显划伤50–200 μm精密光学元件划痕1–10 μm晶圆表面微划痕0.1–1 μm纳米级划伤超精密加工 100 nm而一个普通工业相机的成像分辨率取决于镜头放大倍率和传感器像元尺寸。假设用 500 万像素、2.3 μm 像元的传感器配 0.5 倍镜头单个像元对应的物方尺寸约为 4.6 μm。这意味着一条 1 μm 宽的划痕在图像上连一个像素都占不满它会被平均进相邻像素里直接消失。光学系统的极限分辨率由衍射决定可用瑞利判据粗略估计d0.61λNA d \frac{0.61 \lambda}{NA}dNA0.61λ其中 λ 为波长NA 为数值孔径。可见光 λ≈0.5 μm普通低倍镜头 NA 约 0.05算下来极限分辨率约 6 μm而高倍显微物镜 NA 可达 0.5–0.9极限分辨率能到 0.3–0.6 μm。这就是为什么必须上高倍显微镜——不是看得更清楚这么简单而是低倍系统在物理上就无法分辨微米级划痕。3.2 视场取舍高倍显微镜的代价是视场变小。10 倍物镜视场约 2 mm50 倍只有 0.4 mm 左右。所以实际产线上常见两种做法高倍 扫描拼接用高倍物镜逐区域拍摄再拼接成全片图像适合抽检或小尺寸高价值元件高倍 自动对焦 高速运动平台边走边拍兼顾分辨率与节拍。3.3 景深划痕有深度。高倍物镜的景深很浅50 倍物镜景深可能只有 1–2 μm而一道划痕的深度往往也是微米级。如果焦面没对准沟槽划痕就会模糊。因此高倍显微成像通常要配合自动对焦或焦点堆栈focus stacking把不同焦面的图像合成一张全清晰的图。4. 多角度的光4.1 核心原理回到第 2 节的结论划痕不改变亮度只改变方向。那么只要让照明光的方向刁钻一点让完好平面和划痕把光反射到不同方向相机就能看到差异。这里涉及两个基本光学行为镜面反射光滑平面把光按入射角等于反射角的规律反射出去方向集中散射/偏折划痕的沟槽壁、粗糙断面会把光打散到各个方向或者让光发生偏折。于是只要让相机看不到完好平面的镜面反射光而看得到划痕的散射光划痕就会在暗背景上亮起来。这就是暗场照明的本质。4.2 明场照明明场是最直观的方式光源和相机大致同侧光照射样品后直接反射或透射进入镜头。优点成像均匀、色彩真实、适合观察整体轮廓、大缺陷、脏污、异物缺点对透明划痕这种只改方向不改亮度的缺陷对比度极低。明场适合回答这个零件整体长什么样但不适合回答表面有没有微划痕。4.3 暗场照明暗场照明的做法是把光源放在相机接收不到镜面反射光的角度上。完好平面光按镜面反射方向跑掉了进不了镜头 → 画面黑划痕沟槽光被沟槽壁散射到各个方向其中一部分进入镜头 → 划痕亮。结果就是黑背景上一条条发亮的划痕对比度极高。这也是为什么暗场几乎是透明材料表面缺陷检测的标配。暗场还分两种明场暗场brightfield/darkfield 组合同一工位切换两种照明先明场定位整体再暗场找微缺陷环形暗场 / 低角度暗场用环形光源以很低的角度掠射表面对浅划痕、麻点特别敏感。4.4 多向补光单一角度的光只能让某一类取向的划痕显形。划痕是有方向的横向划痕、纵向划痕、斜向划痕它们的沟槽壁朝向不同对同一束光的散射效率也不同。光从左侧来可能让竖直方向的划痕很亮横向划痕却很暗换成从上方来亮的划痕方向就变了。所以工程上常用多角度光源如四象限环形光、多角度穹顶光、可编程光源依次点亮不同方向或者同时点亮做合成。这样无论划痕朝哪个方向总有一个角度能把它照出来。4.5 偏振光对于高反光、透明材料还可以在光源前加偏振片、镜头前加检偏器。完好平面的镜面反射会保持偏振态可以被检偏器挡掉而划痕的散射会改变偏振态部分光能穿过检偏器。这样背景更暗、划痕更亮信噪比进一步提升。5. 成像链路下面用一张流程图概括从看不见到看得见的完整思路明场暗场多角度偏振透明划痕样品照明方式选择整体形貌/大缺陷微划痕/浅划痕不同取向划痕压制镜面背景高倍显微物镜自动对焦/焦点堆栈高分辨率相机图像处理: 增强/分割/分类缺陷判定与定位可以看到高倍显微镜解决分辨得出多角度光照解决看得见两者缺一不可只有高倍、没有合适光照分辨率够了但划痕和背景一样灰图像里依然找不到只有光照、没有高倍划痕亮了但宽度不足一个像素亮斑被平均掉依然测不准。6. 工程要点6.1 光源调试暗场角度没有万能公式和材料折射率、划痕深度、物镜工作距离都有关。实际调试时通常从低角度掠射开始逐步抬高观察对比度变化找到信噪比最高的角度。6.2 光源与物镜的干涉高倍物镜工作距离很短几十倍物镜可能只有几毫米环形光源、同轴光源的安装空间受限。这时常改用物镜内同轴照明或光纤导光的小型暗场环。6.3 运动拖影高倍下视场小平台运动速度稍快就会拖影。需要根据曝光时间和运动速度匹配必要时用频闪光源冻结运动。6.4 算法边界很多人指望靠算法把模糊的划痕算出来。但如果光学上就没采集到对比度算法也无能为力。成像质量决定了信息上限算法只能逼近这个上限。先把光照和分辨率做对再谈增强和分割。7. 小结回到最初的两个问题为什么要高倍显微镜因为划痕宽度常在微米甚至亚微米级低倍光学系统受衍射极限限制物理上就分辨不出来。高倍物镜用更大的数值孔径把极限分辨率压到亚微米才能让划痕占据足够多的像素。为什么要用不同角度的光因为透明划痕不改变亮度只改变光的传播方向。明场看整体暗场让划痕散射的光在暗背景上显形多角度覆盖不同取向的划痕偏振进一步压制背景。一句话总结透明划痕检测本质是一场把方向信息翻译成亮度信息的游戏。高倍显微镜负责把空间信息留住多角度光照负责把方向信息显影二者配合才能让那些肉眼看不见的划痕在屏幕上无所遁形。
)
