机械臂做视觉引导绕不开的第一个决策是相机装在哪。眼在手上eye-in-hand是把相机固定在末端法兰或腕部随机械臂一起运动眼在手外eye-to-hand是把相机固定在支架、龙门或工作台外侧俯视整个作业区。两种装法都能完成定位与抓取但它们对精度、遮挡、节拍、标定维护的影响完全不同。本文按工程维度拆开对比关键在于权衡精度、覆盖与维护成本不针对具体型号也不引用未经实测的精度、帧率与距离数字。一、先把“手眼”这件事定义清楚手眼方案是指相机与机械臂之间的固定位置关系以及由此建立的一套坐标变换。相机看到的目标点要经过像素坐标、相机坐标、末端坐标或基座坐标几层变换才能变成机械臂能执行的位姿。“手眼标定”标的就是这套变换里那个固定的外参相机相对末端法兰的位置或者相机相对机械臂基座的位置。标定一旦变化整条变换链都要更新。这也解释了为什么装法如此关键它决定了外参连在哪一头也就决定了这套系统在换工具、拆装、碰撞之后要不要重标。二、两种装法的坐标系与标定对象眼在手上相机坐标系与末端坐标系刚性绑定。机械臂运动时相机与末端之间的变换保持不变变的是末端在基座坐标系里的位姿。标定对象是相机到末端法兰的外参。眼在手外相机坐标系与基座坐标系绑定。机械臂怎么动相机都不动标定对象是相机到基座的外参。两者的差别不只是“标哪个”还有误差来源。手上的方案机械臂的运动学误差会直接进入视觉引导链路手外的方案相机固定但机械臂末端的位置要靠运动学正解算出来同样躲不开运动学误差。三、坐标变换链一次视觉引导要过几道手相机给出的目标是一个像素坐标机械臂要的是一个位姿。中间要串起四层变换像素到相机、相机到末端或基座、末端到基座。眼在手上的链路是像素 → 相机 → 末端 → 基座。相机与末端的外参固定机械臂每动一次末端到基座的变换就更新一次。眼在手外的链路是像素 → 相机 → 基座。少了一层随动的变换但末端位姿仍要靠运动学正解算出来。链路越长误差累积的环节越多。标定时要逐段确认而不是只验最后那个抓取点。一个实用的做法是在视野里放一个固定参照物让机械臂用不同姿态去对观察残差是否随姿态变化。四、精度分辨率的账要按距离算相机的角分辨率是固定的落到物方能分辨多细取决于工作距离和视场。眼在手上把相机推到工件附近同样的像素数覆盖更小的物理范围单位像素对应的实物尺寸更小对位精度更容易做上去。眼在手外要覆盖整个工作台视场大单位像素覆盖的实物尺寸大。工件越靠近视野边缘透视和畸变的影响越明显。所以比较两种方案不能只比相机参数要比“在需要精度的那个距离段上谁能做到”。近距高精度的抓取与装配手上更占优大范围的位置搜索手外更从容。还有一个容易被忽略的点视场与分辨率是一对矛盾。想一次看全整个工作台就得接受单位像素覆盖更大的实物尺寸想看清细节就得缩小视场或者让相机靠近。手外方案通常选择前者手上方案通常选择后者。这不是谁更先进而是取舍不同。五、视野与遮挡手外的结构性短板眼在手外的视野是固定的好处是稳定坏处是遮挡无法回避。机械臂伸向工件时自己的大臂、小臂、手腕都可能挡在相机与目标之间工件堆叠、夹具立起、料框边缘也会形成遮挡。遮挡的麻烦在于信息缺失。被挡住的区域画面里没有有效像素靠算法只能猜补不回来。工程上的解法是布点调整相机高度与角度、增加第二视角、把相机挪到机械臂运动包络之外。眼在手上因为离工件近被机械臂自身遮挡的概率低一些但手腕转动、末端夹具仍可能挡住镜头同样需要在选型时确认。六、随动的代价负载、惯量与线缆相机、镜头、光源、支架都装在末端首先影响的是负载。末端负载增加机械臂的可用负载余量减少选型时要重新核对负载曲线而不是只看额定值。其次是惯量。末端转动惯量变大轨迹精度和节拍都会受影响高速启停时更明显。第三是线缆。相机与光源的线缆要跟着关节反复弯折长期运行下是可靠性隐患。走线要留冗余、做固定、避免在关节处形成锐角弯折。相机被碰撞后位置偏移也是这类方案常见的故障。七、节拍触发时机比处理时间更值钱视觉要占用节拍。眼在手外的典型流程是机械臂到位、触发拍照、图像处理、输出坐标、机械臂再动作。相机固定触发点容易设计但机械臂必须停下来等结果。眼在手上可以边运动边采集利用运动过程做预采集把一部分等待藏进运动时间里。但运动带来模糊曝光时间不能太长补光也要跟上。所以节拍这笔账要连“什么时候拍”一起算。单纯比较算法处理耗时往往会高估或低估视觉对节拍的真实影响。如果节拍确实很紧可以先做两件事把图像采集与机械臂运动重叠起来减少纯等待把处理流程里不必要的全图操作改成感兴趣区域降低单帧耗时。这两件事的效果通常比换一台更快的相机更直接。八、标定频率与长期维护成本眼在手外的相机不动标定一次可以覆盖一片区域稳定性好维护成本低。只要支架不被动、相机不被撞外参可以长期使用。眼在手上的相机随末端运动换工具、拆装末端、碰撞、甚至更换夹具都可能改变相机与末端的相对位置需要重新标定。它不是“做一次”的动作而是一项需要纳入产线维护计划的长期成本。选型时要问清楚这条线换型频繁吗现场有没有人能独立完成手眼标定标定工具好不好用这些问题的答案往往比参数表更能决定方案能不能落地。九、光照与反光两种装法都躲不开工件表面反光、环境光变化、机械臂投下的阴影都会影响深度与彩色的质量。眼在手外距离远主动补光的效果随距离衰减环境光的影响更明显。眼在手上离工件近主动光更容易控制曝光和增益的调整空间也更大。但相机随末端运动光源也跟着动反光的角度会变化标定与参数不能只按一个静态姿态来调。无论哪种装法都不要指望算法把过曝或欠曝的区域“修回来”。能在光学与布光阶段解决的不要留给后处理。十、混合方案手外粗定位 手上精对位实际产线里纯手上或纯手外未必是最优解。常见的组合是固定相机先做粗定位判断目标大致在哪个区域、是什么姿态机械臂移动到附近后末端相机再做精对位修正最后的偏差。这样做兼顾了手外的覆盖与稳定以及手上的近距精度。代价是两套相机、两套标定、两套坐标变换系统复杂度和调试工作量都上去了。是否采用混合方案取决于任务对“大范围搜索”和“近距精度”是否同时有要求。只做固定工位的抓取未必需要两套。十一、验收怎么验证一套手眼方案验收不要只看一次抓取成功。至少做四件事。第一固定参照物测试在视野内放一个已知位置的标定板或工装重复测量看结果是否稳定。第二多姿态测试让机械臂从不同方向接近同一目标观察视觉输出的偏差是否随姿态变化。偏差随姿态变往往指向标定或运动学问题。第三遮挡测试人为挡住部分视野确认系统能识别无效区域而不是把缺失当成有效值继续算。第四换工具测试如果产线会换末端换完之后重标一次记录耗时与操作难度。这个数字决定了方案在真实产线上的可维护性。十二、选型检查表把上面的维度落到一张表里便于逐项对照维度眼在手上眼在手外精度近距更容易做高随距离与视场衰减覆盖局部、跟随末端大范围、固定遮挡相对少机械臂与工件都易挡标定对象相机到末端法兰相机到机械臂基座标定频率换工具/拆装后需重标一次标定可用较久负载与线缆压在末端需核算无附加负载节拍可边动边拍需停机等待适用抓取、对位、装配分拣、上料、大范围定位这张表不能代替现场验证但可以快速筛掉明显不合适的方案。十三、常见误区与结论第一个误区是“眼在手上一定更准”。近距确实有利但如果任务是全盘搜索手上方案要反复移动才能覆盖节拍反而更差。第二个误区是“标定一次就够”。换工具、拆装、碰撞都会让外参变化标定必须能复查、能重做。第三个误区是“遮挡可以靠算法补”。被挡掉的信息补不回来只能改布点。结论先看任务再看装法。要看的点会不会随姿态变化、精度要求落在哪个距离段、换工况要花多久重标这三问答完方案基本就定了。手眼没有绝对的先进与落后只有与任务匹配与否。对集成商而言最该警惕的不是选错装法而是没算清标定与维护的长期成本。【备选标题】机械臂装相机眼在手上还是眼在手外手眼方案怎么选先看任务再看装法记住装错位置标定和维护都会变成长期成本
机械臂做视觉引导绕不开的第一个决策是相机装在哪。眼在手上eye-in-hand是把相机固定在末端法兰或腕部随机械臂一起运动眼在手外eye-to-hand是把相机固定在支架、龙门或工作台外侧俯视整个作业区。两种装法都能完成定位与抓取但它们对精度、遮挡、节拍、标定维护的影响完全不同。本文按工程维度拆开对比关键在于权衡精度、覆盖与维护成本不针对具体型号也不引用未经实测的精度、帧率与距离数字。一、先把“手眼”这件事定义清楚手眼方案是指相机与机械臂之间的固定位置关系以及由此建立的一套坐标变换。相机看到的目标点要经过像素坐标、相机坐标、末端坐标或基座坐标几层变换才能变成机械臂能执行的位姿。“手眼标定”标的就是这套变换里那个固定的外参相机相对末端法兰的位置或者相机相对机械臂基座的位置。标定一旦变化整条变换链都要更新。这也解释了为什么装法如此关键它决定了外参连在哪一头也就决定了这套系统在换工具、拆装、碰撞之后要不要重标。二、两种装法的坐标系与标定对象眼在手上相机坐标系与末端坐标系刚性绑定。机械臂运动时相机与末端之间的变换保持不变变的是末端在基座坐标系里的位姿。标定对象是相机到末端法兰的外参。眼在手外相机坐标系与基座坐标系绑定。机械臂怎么动相机都不动标定对象是相机到基座的外参。两者的差别不只是“标哪个”还有误差来源。手上的方案机械臂的运动学误差会直接进入视觉引导链路手外的方案相机固定但机械臂末端的位置要靠运动学正解算出来同样躲不开运动学误差。三、坐标变换链一次视觉引导要过几道手相机给出的目标是一个像素坐标机械臂要的是一个位姿。中间要串起四层变换像素到相机、相机到末端或基座、末端到基座。眼在手上的链路是像素 → 相机 → 末端 → 基座。相机与末端的外参固定机械臂每动一次末端到基座的变换就更新一次。眼在手外的链路是像素 → 相机 → 基座。少了一层随动的变换但末端位姿仍要靠运动学正解算出来。链路越长误差累积的环节越多。标定时要逐段确认而不是只验最后那个抓取点。一个实用的做法是在视野里放一个固定参照物让机械臂用不同姿态去对观察残差是否随姿态变化。四、精度分辨率的账要按距离算相机的角分辨率是固定的落到物方能分辨多细取决于工作距离和视场。眼在手上把相机推到工件附近同样的像素数覆盖更小的物理范围单位像素对应的实物尺寸更小对位精度更容易做上去。眼在手外要覆盖整个工作台视场大单位像素覆盖的实物尺寸大。工件越靠近视野边缘透视和畸变的影响越明显。所以比较两种方案不能只比相机参数要比“在需要精度的那个距离段上谁能做到”。近距高精度的抓取与装配手上更占优大范围的位置搜索手外更从容。还有一个容易被忽略的点视场与分辨率是一对矛盾。想一次看全整个工作台就得接受单位像素覆盖更大的实物尺寸想看清细节就得缩小视场或者让相机靠近。手外方案通常选择前者手上方案通常选择后者。这不是谁更先进而是取舍不同。五、视野与遮挡手外的结构性短板眼在手外的视野是固定的好处是稳定坏处是遮挡无法回避。机械臂伸向工件时自己的大臂、小臂、手腕都可能挡在相机与目标之间工件堆叠、夹具立起、料框边缘也会形成遮挡。遮挡的麻烦在于信息缺失。被挡住的区域画面里没有有效像素靠算法只能猜补不回来。工程上的解法是布点调整相机高度与角度、增加第二视角、把相机挪到机械臂运动包络之外。眼在手上因为离工件近被机械臂自身遮挡的概率低一些但手腕转动、末端夹具仍可能挡住镜头同样需要在选型时确认。六、随动的代价负载、惯量与线缆相机、镜头、光源、支架都装在末端首先影响的是负载。末端负载增加机械臂的可用负载余量减少选型时要重新核对负载曲线而不是只看额定值。其次是惯量。末端转动惯量变大轨迹精度和节拍都会受影响高速启停时更明显。第三是线缆。相机与光源的线缆要跟着关节反复弯折长期运行下是可靠性隐患。走线要留冗余、做固定、避免在关节处形成锐角弯折。相机被碰撞后位置偏移也是这类方案常见的故障。七、节拍触发时机比处理时间更值钱视觉要占用节拍。眼在手外的典型流程是机械臂到位、触发拍照、图像处理、输出坐标、机械臂再动作。相机固定触发点容易设计但机械臂必须停下来等结果。眼在手上可以边运动边采集利用运动过程做预采集把一部分等待藏进运动时间里。但运动带来模糊曝光时间不能太长补光也要跟上。所以节拍这笔账要连“什么时候拍”一起算。单纯比较算法处理耗时往往会高估或低估视觉对节拍的真实影响。如果节拍确实很紧可以先做两件事把图像采集与机械臂运动重叠起来减少纯等待把处理流程里不必要的全图操作改成感兴趣区域降低单帧耗时。这两件事的效果通常比换一台更快的相机更直接。八、标定频率与长期维护成本眼在手外的相机不动标定一次可以覆盖一片区域稳定性好维护成本低。只要支架不被动、相机不被撞外参可以长期使用。眼在手上的相机随末端运动换工具、拆装末端、碰撞、甚至更换夹具都可能改变相机与末端的相对位置需要重新标定。它不是“做一次”的动作而是一项需要纳入产线维护计划的长期成本。选型时要问清楚这条线换型频繁吗现场有没有人能独立完成手眼标定标定工具好不好用这些问题的答案往往比参数表更能决定方案能不能落地。九、光照与反光两种装法都躲不开工件表面反光、环境光变化、机械臂投下的阴影都会影响深度与彩色的质量。眼在手外距离远主动补光的效果随距离衰减环境光的影响更明显。眼在手上离工件近主动光更容易控制曝光和增益的调整空间也更大。但相机随末端运动光源也跟着动反光的角度会变化标定与参数不能只按一个静态姿态来调。无论哪种装法都不要指望算法把过曝或欠曝的区域“修回来”。能在光学与布光阶段解决的不要留给后处理。十、混合方案手外粗定位 手上精对位实际产线里纯手上或纯手外未必是最优解。常见的组合是固定相机先做粗定位判断目标大致在哪个区域、是什么姿态机械臂移动到附近后末端相机再做精对位修正最后的偏差。这样做兼顾了手外的覆盖与稳定以及手上的近距精度。代价是两套相机、两套标定、两套坐标变换系统复杂度和调试工作量都上去了。是否采用混合方案取决于任务对“大范围搜索”和“近距精度”是否同时有要求。只做固定工位的抓取未必需要两套。十一、验收怎么验证一套手眼方案验收不要只看一次抓取成功。至少做四件事。第一固定参照物测试在视野内放一个已知位置的标定板或工装重复测量看结果是否稳定。第二多姿态测试让机械臂从不同方向接近同一目标观察视觉输出的偏差是否随姿态变化。偏差随姿态变往往指向标定或运动学问题。第三遮挡测试人为挡住部分视野确认系统能识别无效区域而不是把缺失当成有效值继续算。第四换工具测试如果产线会换末端换完之后重标一次记录耗时与操作难度。这个数字决定了方案在真实产线上的可维护性。十二、选型检查表把上面的维度落到一张表里便于逐项对照维度眼在手上眼在手外精度近距更容易做高随距离与视场衰减覆盖局部、跟随末端大范围、固定遮挡相对少机械臂与工件都易挡标定对象相机到末端法兰相机到机械臂基座标定频率换工具/拆装后需重标一次标定可用较久负载与线缆压在末端需核算无附加负载节拍可边动边拍需停机等待适用抓取、对位、装配分拣、上料、大范围定位这张表不能代替现场验证但可以快速筛掉明显不合适的方案。十三、常见误区与结论第一个误区是“眼在手上一定更准”。近距确实有利但如果任务是全盘搜索手上方案要反复移动才能覆盖节拍反而更差。第二个误区是“标定一次就够”。换工具、拆装、碰撞都会让外参变化标定必须能复查、能重做。第三个误区是“遮挡可以靠算法补”。被挡掉的信息补不回来只能改布点。结论先看任务再看装法。要看的点会不会随姿态变化、精度要求落在哪个距离段、换工况要花多久重标这三问答完方案基本就定了。手眼没有绝对的先进与落后只有与任务匹配与否。对集成商而言最该警惕的不是选错装法而是没算清标定与维护的长期成本。【备选标题】机械臂装相机眼在手上还是眼在手外手眼方案怎么选先看任务再看装法记住装错位置标定和维护都会变成长期成本
