机器视觉测量技术2.

1、 实际中的光源总有一定的发光面积f扩展光源。扩展光源表面的每个面元ds沿某个方向r有一定发光强度dI沿r观察，则ds=dscose投影面积则面元ds沿r方向的光度学亮度B定义为在此方向上单位投影面积的发光强度。高度：dIdIdBdSidS-codQ-dS-co单位：吟m2被照表面照度：一个被光线照射的表面上的照度，为照射在单位面积上的光通量，设面积ds上的光通量为dQ，则:照度E单位：1X（勒克斯）1Lx=1lmm2lm/tf照度光学系统的像面照度和其他表面的照度是必须了解的光学量。参看图1.4-1，从轴面上的面元dA、辐射到接收面上的面元dA2的辐射通量为：d2=LdAdQ,Cose式中dQ

2、1dA2cos02图xx辐射的传播而从物面辐射到接收面的总辐射通量为二JJJlC0江dAdAdATOC o 1-5 h z2A1A1A2r211212设物面是朗伯面，即L与面元dA的位置无关，则O=LAJJC0Q!CQ2dAdA21A1A2r1212cocoQ=OJJ+2dAdA1A1A2r1212由此12=JJA1A2CosQcsQ12r12dAdA12式中F12称为辐射传输系数，它只与表面的形状、位置、大小和方向有关。是一纯粹几何量。F12是一二重积分量，很难计算，不过现在已经对一些典型情况，计算出了结果，并且列出了表格，可供查阅。像面照度光学系统像面上的照度会受两方面的影响：（1）光学系

3、统的会聚和发散作用；（2）光学系统的吸收、反射、散射和挡光的作用；为了简单起见，将忽略第（2）种影响，而对于第（1）种影响将通过光学系统的几何度G表示出来，并使这一计算变得很简单。几何度G的定义为G=AJJC叫C0S2dAdA1A1A2r21212=AG1T式中CosQCosQG=JJi2dAdATA1A2r21212这是投影立体角，它是接收面dA2对物面dA所张立体角在物面法线方向的投影的积分。几何度G只和光源的几何尺寸、光源到光学系统的距离、光学系统的入瞳尺寸以及光学系统的结构有关。当光能通过光学系统且不存在损失时，G是不变量，即在光学系统内的不同截面上，G都是相同的。若从图1.42观察则

4、有Gs=Ge=Gx=Gi式中Gs、Ge、Gx、Gi分别是光学系统的物面S、入瞳面e、出瞳面x、像面i的几何度。物平MS像平liiii入瞳宜径。出尷直径D图1.42从上可以看出;（1）几何度G可以表示光学系统传输辐射的能力；（2）可以根据易于计算的截面上的G值，计算出任一截面上的照度。例如：（1）光能无损失的光学系统像面中心的辐射度由二LA得到iiE=LAii兀D2兀Df=L=L()2()24l24fl1L(D)24f1(1_a)式中，是光学系统的纵向放大率。（2）视场角为e处像平面上的辐照度。比较物方侧物点1和轴上点0所对应立体角的大小。对于物点1，入瞳所对应的立体角为COS0Le(l/cos

5、8)2式中Q0是入瞳对轴上点0所张的立体角，故轴外点像平面的辐照度为E=Lcos9（D）2-cos39i4f（1_a）21L(2)24fCOS49(1_a)2上式说明：像面照度吓光学系统的相对孔径）的平面成正比，又和视场角。的余弦的4次方成正比；需要特别注意的是：EsC0S49，这将严重影响像面照度的均匀性。但是，对于野外i景物，它并不是朗伯体，而是各向均匀发光体，则Escos39i1.7视觉的空间知觉人眼能在高和宽为2D空间上形成的视象得到一个3D视觉空间。非视觉性深度线索眼睛聚焦调节：观察远点不同的物体时，眼睛调节晶状体，使成清晰象，这种调节活动给大脑提供信息，提供深度估计。据此f共焦测距

6、法双眼视轴的融合观察远近不同的物体，双眼自动调节使视轴对准视网膜中心，做幅合运动。双眼深度线索中央眼确定主观视觉方向，视觉是产生立体知觉和深度知觉。（单独产生）单眼深度线索大小：尺寸相近的物体，近：成像大；远：成像小物体的遮挡：遮挡来判断物体的前后距离光亮与阴影：近：物体明亮；远：物体灰暗颜色分布：近：黄或红；远：蓝空气透视：近：轮廓清晰；远：模糊不清纹理：近：纹理稀疏；远：纹理密集运动：近：视角变化大；远：视角变化小坐车过电线杆，和远处的树）f/t-7-第二章图像的采集和量化2.1采集装置的性能指标接受外界的激励并产生响应，把模拟的响应转化为数字化的信号，从而可被计算机利用。采集装置功能：接

7、受辐射（光、声、电）进行模数转换。采集装置性能指标：线性响应：输入物理信号的强度与输出响应信号的强度之间关系是否线性。灵敏度：绝对灵敏度用能拾测到的最小光子数表示。相对灵敏度用能使输出发生一级变化所需光子数表示。信噪比：所采集的图像中有用信号与无用干扰的（能量或强度）比值。阴影（不均匀度）：输入物理信号为常数而输出的数字形式不为常数的现象。象素形状：一般为正方形，但也有其它形状（如运动）。频谱灵敏度：对不同频率辐射的相对灵敏度。快门速度：采集拍摄时间。读取速度：信号数据从敏感单元读取（传输）的数率。2.2电荷藕合摄像器件面阵CCD原理。（帧转移型，隔列转移型，线转移型）面阵CCD的基本特性参数

8、：光电转移特性光电转换因子Y，般99.7%。光谱响应动态范围：输出信号峰值电压与均方根噪声电压之比。噪声源：电荷注入器件引起的噪声。电荷转移过程中，电荷量变化引起的噪声。拾测时产生的噪声。暗电流：正常工作时，MOS电容处于未饱和的非平衡状态，但由于热激发产生的少量载流子使系统趋向平衡。暗电流是判断一个系统好坏的重要标志。分辨率：像元位数高的器件具有更高的分辨率。面阵CCD，只评价其水平分辨率，且用电视线数的评价方法。在一幅图像上，在水平方向能够分辨出的黑白条数分辨率。baAb填充系数Fb电敏感区域占整个矩阵面的比例bF=nx100%bxb拖影：由寄存器电荷移位时留下的剩余电荷量产生。三管CCD

9、彩色摄像机分光棱镜三色三CCD接收RGB信号单管CCD彩色摄像机栅状滤色器f三色f三CCD接收fRGB信号（例举液晶显示器）特种CCD图像传感器微光CCD图像传感器（多帧积累）直视夜视仪微光透视图像传感器特点：便于图像处理，实现远距传输或遥控，实现自动控制直接用于制导录像并长期保存。红外CCD图像传感器（IRCCD）用于夜视，、跟踪制导、红外侦察、预警。（海湾战争）主动红外电视摄像：红外光源（红外光源，半导体激光器）红外摄像器件（CCD）红外变像管：把不可见的红外线转变成可见光。X光CCD图像传感器医疗影像+工业探测目标：小剂量X光照射，图像远程传输。x光CD机一图象处理监视器牛x光增强管二Q

10、书2.3CCD相机分类:彩色相机黑白相机按灵敏度划分：普通型（照度13lux）,月光型（照度0.1lux）星光型（照度0.01lux）,红外型（红外照明，天光线）按CCD灵敏度尺寸分为1/4inch,1/3inch,1/2inch,1inch相机。按扫描方式：有面扫描和线扫描方式，面扫描又分为逐行扫描和隔行扫描。按同步方式：内扫描（普通相机），外同步功能相机。CCD相机主要功能调节同步方式选择：内同步（利用内置的同步信号发生器产生同步信号）；外同步（外触发信号）；电源同步（利用电源完成垂直同步）；自动增益控制：CCD信号的视频放大器，对不同照度而随之改变增益，可使相机在较大的光照范围内进行工作

11、。背光补偿：自动补偿（AGC）以整个视场平均值来确定（亮背景，暗前景）启动背光补偿，则AGC只对前景视场求平均确定增益。电子快门：CCD仅输出快门开启时的光电荷信号，其余时间则被泄放。最短电子快门为1/1000S。丫校正：L丫=V（机器视觉丫=1）光（L）CCD电（V）f显示器一光。要保持二次转换中的综合特性具有线性。自平衡（仅用于彩色相机）：对景物图像进行色温补偿，分为自动调节和手动调节两种CCD相机接口：光学接口信号接口：RS422：双绞线，相机具有110。终端负载。CameraLink：控制信号、视频信号、串行通讯。LVDS（低振幅差分信号）：低电压和低电压驱动实现了低噪声和低功耗。IE

12、EE1394：串行接口（Firewire）400Mbps,不需要集线器就可以连接63台设备，连接电脑可省去图像采集卡。2.4彩色数码相机图像镜头CCDA/D数字信息存储数码相机的最大特点是它的一系列的二进制数据和标准的图像存储方式把所摄图像存放在机内存储器，并可以通过专用接口与通用计算机联机，实现图像传输和计算机处理的功能。分辨率高达3060 x2036。主要性能：1分辨率：常有1600 x1200，1024x768，640 x780。2色彩深度：专业的达到36位或24位。3焦距：可高达10倍光学变焦，数码变焦。4.光圈快门：快门1/50016S广角光圈f2.5f16；长焦光圈f3.8f24。

13、5图像存储：内置存储卡JPG格式120K。6取景器“观看拍摄效果和编辑修改（液晶）。7.接口功能：RS232、SCSI、USB。1394接口。8其他接口：自动测光、自动调焦、自动闪光、自拍。2.5常用的图像文件格式1.BMPGIFTIFF（TIF）JPEG（JPG）（依据数字图像处理内容简单扩展）2.6照明系统设计照明系统设计的基本因素：镜头的视场：被测物尺寸一镜头视场一最佳照明（照亮整个视场）照明系统与工作间距：镜头到工作距离一照明系统到工作间距一光源到工作距离工件的外形，条纹及颜色：工作表面形状、平坦度、粗糙度、颜色成像物镜自配：针对确定的成像物镜进行光源设计一划痕、缺陷、印纹等能被清晰显

14、现。照度自配：根据CCD的光表面动态响应范围确定合适的像表面度。照明系统的选择：直接型：沐光方式高环形光反射型低角度方式低环形光漫反射条形方式条形光源聚光方式聚光高亮方式（激光）投射型：高亮投射照明导光面（光板）投射照明线条光源投射照明同轴光照明：与光轴平行的平行光均匀照明工件。不同频率光线照明（多彩）第三章二值图像分析一幅数字图像是一个二维阵列，阵列元素值称为灰度值或强度值实际上，图像在量化成数字图像前是一个连续强度函数的集合，场景信息就包含在这些强度值中图像强度通常被量化成256个不同灰度级，对某些应用来说，也常有32、64、128或512个灰度级的情况，在医疗领域里甚至使用高达4096（

15、12bits）个灰度级很明显，灰度级越高，图像质量越好，但所需的内存也越大在机器视觉研究的早期，由于内存和计算能力非常有限，而且十分昂贵，因此视觉研究人员把精力主要集中在研究输入图像仅包含两个灰度值的二值视觉系统上人们注意到，人类视觉在理解仅由两个灰度级组成的线条、轮廓影像或其它图像时没有任何困难，而且应用场合很多，这一点对研究二值视觉系统的研究人员是一个极大的鼓舞随着计算机计算能力的不断增强和计算成本的不断下降，人们普遍开始研究基于灰度图像、彩色图像和深度图像的视觉系统尽管如此，二值视觉系统还是十分有用的，其原因如下：计算二值图像特性的算法非常简单，容易理解和实现，并且计算速度很快.二值视觉

16、所需的内存小，对计算设备要求低工作在256个灰度级的视觉系统所需内存是工作在相同大小二值图像视觉系统所需内存的八倍如若利用游程长度编码等技术（见34节）还可使所需内存进一步减少由于二值图像中的许多运算是逻辑运算而不是算术运算，所以所需的处理时间很短（3）许多二值视觉系统技术也可以用于灰度图像视觉系统上在灰度或彩色图像中，表示一个目标或物体的一种简易方法就是使用物体模板（mask），物体模板就是一幅二值图像，其中1表示目标上的点，0表示其它点在物体从背景中分离出来后，为了进行决策，还需要求取物体的几何和拓扑特性，这些特性可以从它的二值图像计算出来因此，尽管我们是在二值图像上讨论这些方法，但它们的

17、应用并不限于二值图像一般来说，当物体轮廓足以用来识别物体且周围环境可以适当地控制时，二值视觉系统是非常有用的当使用特殊的照明技术和背景并且场景中只有少数物体时，物体可以很容易地从背景中分离出来，并可得到较好的轮廓，比如，许多工业场合都属于这种情况二值视觉系统的输入一般是灰度图像，通常使用阈值法首先将图像变成二值图像，以便把物体从背景中分离出来，其中的阈值取决于照明条件和物体的反射特性二值图像可用来计算特定任务中物体的几何和拓扑特性，在许多应用中，这种特性对识别物体来说是足够的二值视觉系统已经在光学字符识别、染色体分析和工业零件的识别中得到了广泛应用在下面的讨论中，假定二值图像大小为mxn，其中

18、物体像素值为1,背景像素值为0.31阈值视觉系统中的一个重要问题是从图像中识别代表物体的区域（或子图像），这种对人来说是件非常容易的事，对计算机来说却是令人吃惊的困难.为了将物体区域同图像其它区域分离出来，需要首先对图像进行分割把图像划分成区域的过程称为分割，即把图像Fi,j划分成区域p,p，,p，使得每一个区域对应一个候选的物体.下面给出分割的严格定义.12k定义分割是把像素聚合成区域的过程，使得：Uk_iP.=整幅图像（P.是一个完备分割）.pnp_0,.丰j，（P是一个完备分割）.iji每个区域P满足一个谓词，即区域内的所有点有某种共同的性质.i不同区域的图像，不满足这一谓词正如上面所表

19、明的，分割满足一个谓词，这一谓词可能是简单的，如分割灰度图像时用的均匀灰度分布、相同纹理等谓词，但在大多数应用场合，谓词十分复杂在图像理解过程中，分割是一个非常重要的步骤二值图像可以通过适当地分割灰度图像得到如果物体的灰度值落在某一区间内，并且背景的灰度值在这一区间之外，则可以通过阈值运算得到物体的二值图像，即把区间内的点置成1，区间外的点置成0对于二值视觉，分割和阈值化是同义的阈值化可以通过软件来实现，也可以通过硬件直接完成通过阈值运算是否可以有效地进行图像分割，取决于物体和背景之间是否有足够的对比度.设一幅灰度图像Fi,j中物体的灰度分布在区间耳,T2内，经过阈值运算后的图像为二值图像FT

20、i,j，即:fti,j=1如果TFi,jT20其它（31）如果物体灰度值分布在几个不相邻区间内时，阈值化方案可表示为（32）._/1如果Fi,jeZFti,刀=0其它其中Z是组成物体各部分灰度值的集合.图3.1是对一幅灰度图像使用不同阈值得到的二值图像输出结果阈值算法与应用领域密切相关.事实上，某一阈值运算常常是为某一应用专门设计的在其它应用领域可能无法工作.阈值选择常常是基于在某一应用领域获取的先验知识，因此在某些场合下，前几轮运算通常采用交互式方式来分析图像，以便确定合适的阈值.但是在机器视觉系统中，由于视觉系统的自主性能（autonomy）要求，必须进行自动阈值选择.现在已经研究出许多利

21、用图像灰度分布和有关的物体知识来自动选择适当阈值的技术.其中的一些方法将在3.2节介绍.图3.1一幅灰度图像和使用不同阈值得到的二值图像结果.上左：原始灰度图像，上右阈值T=100；左下：T=128.右下：T1=100IT2=128.32几何特性通过阈值化方法从图像中检测出物体后，下一步就要对物体进行识别和定位.在大多数工业应用中，摄像机的位置和环境是已知的，因此通过简单的几何知识就可以从物体的二维图像确定出物体的三维位置在大多数应用中，物体的数量不是很多，如果物体的尺寸和形状完全不同，则可以利用尺度和形状特征来识别这些物体实际上在许多工业应用中，经常使用区域的一些简单特征，如大小、位置和方向

22、，来确定物体的位置并识别它们321尺寸和位置一幅二值图像区域的面积（或零阶矩）由下式给出：A辺乞Bi,ji=0j=033）在许多应用中，物体的位置起着十分重要的作用工业应用中，物体通常出现在已知表面（如工作台面）上，而且摄像机相对台面的位置也是已知的在这种情况下，图像中的物体位置决定了它的空间位置确定物体位置的方法有许多，比如用物体的外接矩形、物体矩心（区域中心）等来表示物体的位置区域中心是通过对图像进行“全局”运算得到的一个点，因此它对图像中的噪声相对来说是不敏感的对于二值图像，物体的中心位置与物体的质心相同，因此可以使用下式求物体的中心位置：x艺刃Bi,j=SEjBi,ji=0j=0i=0

23、j=0yEEBi,j=iBi,ji=0j=0i=0j=0(34)其中x和y是区域相对于左上角图像的中心坐标.物体的位置为:n-1m-1EEjBi,jX=i=0j=0An-1m-1EEiBi,j(3.5)y=-i=0j=0A这些是一阶矩.注意，由于约定y轴向上，因此方程3.4和3.5的第二个式子的等号右边加了负号.322方向计算物体的方向比计算它的位置稍微复杂一点.某些形状（如圆）的方向不是唯一的为了定义唯一的方向，一般假定物体是长形的，其长轴方向被定义为物体的方向.通常，二维平面上与最小惯量轴同方向的最小二阶矩轴被定为长轴.图像中物体的二阶矩轴是这样一条线，物体上的全部点到该线的距离平方和最小

24、.给出一幅二值图像Bi，j，计算物体点到直线的最小二乘方拟合，使所有物体点到直线的距离平方和最小:4 nimi(36)二乙乙r2Bi,jiji=0j=0其中r.是物体点i,j到直线的距离.为了避免直线处于近似垂直时所出现的数值病态问题,ij人们一般把直线表示成极坐标形式：p=xcos0+ysin0(3.7)如图3.2所示，0是直线的法线与x轴的夹角，P是直线到原点的距离把点(i,j)坐标代入直线的极坐标方程得出距离r:r2=(xcos0+ysin0-p)2(3.8)图3.2直线的极坐标表示将方程3.8代入方程3.6并求极小化问题，可以确定参数P和0:X2=吐Ixcos0+ysin0-p)2Bi

25、,j(3.9)ijiji=0j=0令X2对P的导数等于零求解P得：p=(xcos0+ysin0)(3.10)它说明回归直线通过物体中心(x,y).用这一P值代入上面的X2，则极小化问题变为：X2=acos20+bsin0cos0+csin20(3.11)其中的参数：a=艺刃(x一x)2Bi,jiji=0j=0b=2艺另(xx)(yy)Bi,j(3.12)ijiji=0j=0c=艺另(y刃2Bi,ji=0j=0ij是二阶矩.表达式x2可重写为:(33)咒2=(a+c)+(a-c)cos20+bsin20222对x2微分，并置微分结果为零，求解0值:tan20=a-c(34)因此，惯性轴的方向由下

26、式给出:sin20=bi；b2+(ac)2cos20=acib2+(ac)2(35)所以由Z2的最小值可以确定方向轴.注意，如果b=0,a=c，那么物体就不会只有唯一的方向轴物体的伸长率E是Z2的最大值与最小值之比:(3.6)Zmaxxmin323密集度和体态比区域的密集度（compact）可用下面的式子来度量:(3.7)其中，p和A分别为图形的周长和面积.根据这一衡量标准，圆是最密集的图形，其密集密度为最大值1/4兀，其它一些图形的比值要小一些.让我们来看一下圆，当圆后仰时，形状成了一椭圆，面积减小了而周长却不象面积减小的那么快，因此密集度降低了.在后仰到极限角时，椭圆被压缩成了一条无限长直

27、线，椭圆的周长为无穷大，故密集度变成了零.对于数字图像，Ap2是指物体尺寸（像素点数量）除以边界长度的平方.这是一种很好的散布性或密集性度量方法.这一比值在许多应用中被用作为区域的一个特征.密集度的另一层意义是:在给定周长的条件下，密集度越高，围成的面积就越大.注意在等周长的情况下，正方形密集度大于长方形密集度.体态比定义为区域的最小外接矩形的长与宽之比，正方形和圆的体态比等于，细长形物体的体态比大于.图3.3所示的是几种形状的外接矩形.图3.3几种外接矩形示意图33投影给定一条直线，用垂直该直线的一簇等间距直线将一幅二值图像分割成若干条，每一条内像素值为1的像素个数为该条二值图像在给定直线上

28、的投影(projection).当给定直线为水平或垂直直线时，计算二值图像每一列或每一行上像素值为1的像素数量，就得到了二值图像的水平和垂直投影，如图34所示由于投影包含了图像的许多信息，所以投影是二值图像的一种简洁表示方式显然，投影不是唯一的，同样的投影可能对应不同的图像图34一幅二值图像及其水平投影图在某些应用中，投影可以作为物体识别的一个特征投影既是一种简洁的图像表示，又可以实现快速算法下面介绍对角线投影的求解方法对角线投影的关键是计算当前行和列对应的投影分布图位置标号.设行和列的标号分别用i和j表示.若图像矩阵为n行m列，则i和j的范围分别为0到n-1和0到m-1.假设对角线的标号d用

29、行和列的仿射变换(线性组合加上常数)计算，即：d=ai+bj+c(3.18)对角线投影共对应n+m-1个条，其中仿射变换把右上角像素映射成对角线投影的第一个位置，把左下角像素映射成最后一个位置，如图3.5所示，则当前行列对应的标号d的公式为：d=i-j+m一1(3.19) 图35二值图像及其对角线上的投影图34游程长度编码游程长度编码（run-lengthencoding）是另一种二值图像的简洁表示方法，它是用图像像素值连续为1的个数（像素1的长度）来描述图像这种编码已被用于图像传输另外，图像的某些性质，如物体区域面积，也可以从游程长度编码直接计算出来在游程长度编码中经常运用两种方法，一种是使

30、用1的起始位置和1的游程长度，另一种是仅仅使用游程长度，但须从1的游程长度开始描述，如图3.6所示0110011100001111110100011111101111111111111110000010000011111的游程（2,2）6,3）（13,6）（20,1）（4,6）（11,10）（1,5）（11，1）（17，4）1和0的游程长度：0，2，2，3，4，6，1，10，3，6，1，105，5，1，5，4图36一幅简单二值图像的游程长度编码如果用第二种方法来表示图像每行的游程长度，并用r；代表图像第i行的第k个游程长i,k度，则全部1的游程长度之和就是所求物体的面积（320）A辺反/i,2

31、k+1i=0k=0其中m.是第i行游程个数，（m.1）/2取整，表示1的游程个数.ii由游程长度编码能很容易地计算水平投影而无需变成原来的图像使用更巧妙的方法也能从游程长度编码计算出垂直和对角线投影35二值图像算法从背景中分离出物体是一个困难的问题，在此将不讨论这个问题这里假设物体可以从背景中分离，并且使用某一谓词，可以对图像中属于物体的点进行标记因此，问题就变为如何将一幅图像中所有被标记的点组合成物体图像这里还假设物体点在空间上是非常接近的利用空间接近概念可以严格定义，利用此定义研究的算法可以把空间上非常接近的点聚合在一起，构成图像的一个成分(component).下面首先引进一些定义，然后讨论有关算法.351定义(1)近邻