计算机科学与技术毕业论文半透明物体抠图技术的研究

22 本科毕业设计论文 题目： 半透明物体抠图技术的研究 院（系） 计算机科学与技术学院 专 业 计算机科学与技术 届 别 2008 学 号 0825112034 姓 名 郑艺 指导老师 ( 陈雁，讲师） 2012 年 5 月 2 摘 要 近年来数字处理技术在各个领域得到了深入的研究并得到广泛的应用。蓝屏抠图 是一种 背景颜色是单一的数字图像抠图技术 ，它是早期研究抠图技术时的一种方法 。本课题研究的是自然图像中前景物体为半透明物体时的数字抠图算法。本文 针对前景色与背景色过于重叠、极易混淆的情况，对一些常见数字抠图算法的应用、产生的问题及如何改 进等进行讨论。本 文 着重解决的是半透明灰度物体在蓝屏情况下的抠图问题。 关键字 ： 数字图像 蓝屏抠图 阿尔法通道 灰度 目标 3 n in is a is a it is an of of is to to of to is to in 22 目 录 摘 要 . 2 . 3 第一章：前言 . 5 . 5 . 5 . 5 . 7 . 7 . 8 第二章 半透明灰度物体的抠图 . 11 . 11 . 11 . 12 . 14 . 14 度物体的抠图算法 . 14 景的采集 . 15 法的详细流程和设计 . 16 第三章 抠图与合成的效果及比较 . 19 . 19 图与合成效果 . 20 第四章 总 结 . 22 参考文献 . 22 致 谢 . 23 5 第一章：前言 字图像处理简介 图像处理技术基本可以分成两大类：模拟图像处理和数字图像处理。数字图像处理是指将图像信号转换成数字信号并利用计算机进行处理的过程。其优点是处理精度高，处理内容丰富，可进行复杂的非线性处理，有灵活的变通能力，一般来说只要改变软件就可以处理内容。困难主要在处理速度上，特别是进行复杂的处理。数字图像处 理技术主要包括如下内容：几何处理、算术处理、图像增强、图像复原、图像重建、图像编码、图像识别、图像理解。数字图像处理技术的发展涉及信息科学、计算机科学、数学、物理学以及生物学等学科，因此数理及相关的边缘学科对图像处理科学的发展有越来越大的影响。近年来，数字图像处理技术日趋成熟，它广泛应用于空间探测、遥感、生物医学、人工智能以及工业检测等许多领域，并促使这些学科产生了新的发展。 数字图像处理技术使 20世纪 60年代随着计算机技术的发展而产生、发展和不断成熟起来的一个新兴技术领域，它在理论上和实际应用中都取得了很 大的成就。 进入 21 世纪，随着计算机技术的迅猛发展和相关理论的不断完善，数字图像处理技术在许多应用领域受到广泛重视并取得了重大的开拓性成就。属于这些领域的有航空航天、生物医学工程、工业检测、机器人视觉、公安司法、军事制导、文化艺术等。该技术成为一门引人注目、前景远大的新型学科。 字抠图技术 图技术的发展历程 图像抠图的发展最初源自于电影制作，图像抠图是计算机视觉处理应用于电影创作中的主要问题之一利用图像抠图技术，电影导演可以在演员所在的场景中加入新的元素，使得场景效果得到极大的提升：还可 以把演员从一个场景中移到另一个新的环境中，使得在最大限度的降低成本悄况下获得最佳效果大多数现 6 代电影的制作都用到了计算机数字图像抠图技术，最有名的电形包括“阿凡达”等这些电影的成功，很大一部分因素在于计算机技术制作的宏伟壮观的场景，而图像抠图技术是计算机制作场景的重要技术之一 . 20世纪 50年代，就出现图像处理技术了，当时的计算机水平己经发展到一定的捏度，人们逐渐开始利用计算机来处理图像信息 20世纪 60年代初期，数字图像处理逐渐形成了一门学科早期的图像处理的目的是提高图像的质量，它以人为对象，以改善人 的视觉效果为标准在图像处理中，输入的是低质量的图像，输出的是经过处理的、高质量的图像，常用的图像处理方法有图像复原、增强、压缩、编码等 数字抠图技术的发展分为两大阶段：光学图像处理和数字图像处理在当今信息技术快速发展情况下，光学场景图像处理己不能适应当今杜会的快速发展，取而代之的是数字图像处理技术的的广泛应用，该技术使得图像处理更加精准和高效 (1）光学抠图时代 图像的抠图与图像合成最早产生于电影胶片的制作过程中在电影胶带的制作过程中，根据电影剧情的发展、场景的需要，往往把同个人物 置于不同的胶带场景中，这就需要图像合成技术那个时代的的图像合成技巧一般是连续两次使用吸光技术，第一次曝光时，迪住胶片不需要曝光的地方，第二次曝光时遮住上次踢光剩下的部分与此同时，人们发明了光学硒片机，带动了相关技术的产生，使得图像的合成比较容易 光学抠图技术当时一般都是面对物体在单一背景中，这样比较容易从背景中提取出来当面对背景颜色比较复杂的情况，需要人工来取得剪影，这项工作需要在转描机上进行，这项工作称为转描，转描需要比较长的时间和很大的耐心。 （ 2）数字抠图时代 自 20世纪 80 年代以来，随着计算机的广泛应用，硒片机等光学设备逐渐被淘汰，随之而来的是数字技术的兴起数字抠图技术可以对蓝屏抠图进行精确地调整，相比光学设各对背景要求比较高，数字化的计算机可以自动的识别背景点，用抠图软件将前景图像提取出来 差分抠图是数字技术发展的一个缩影，这不同于光学抠图时代的技术，不需 7 要在蓝色背景或其他单色背景下获取物休差分抠图的一般流程是：在同一背景下连续拍摄两次物体第一次在有前景物体时拍摄第二次在没有前最物体时拍摄差分抠图根据拍摄的这两幅图片的差异来完成抠图 字抠图技术的基 本模型 抠图技术，简单的说，就是把一幅目标图像中感兴趣的部分捉取出来，允许用户指定该图像中的部分前景区城和背景区域，算法根据指定前景和背景信息填充未知区域，最终将感兴趣图像提取出来。抠图的关健一步是把目标物体从原图像的背景中提取出来 1984年哈弗商学院教授 C= F+(1B （ 1） 公式引入人 道的概念，其中，对于处于未知区城的某一像素点， 度点在该通道上颜色值，包括 R, G, F, 表示要处理像素在该通道上的 过公式 (1)知区域的每一个像素点的颜色值 ,B,三个参数决定的，也就是由前景颜色、背景颜色和三者的值所共同决定的。 字抠图技术的分类 目前，数字图像抠图技术一般分为两种：蓝屏抠图和自然图像抠图 然圈像抠图就是背景颜色是复杂的数字图像抠图技术如图 a, b 分别表示蓝屏抠图、自然背景抠图。 8 下面介绍蓝屏抠图和自然图像抠图： （ 1） 蓝屏抠图 蓝屏抠图，就是把需要抠出的物体置于蓝色背景下进行抠图。蓝屏抠图是一种习惯的叫法，在抠图早期，一般把物体置于蓝色背景下进行抠图，这主要是通过固定背景的颜色值，对前景的颜色进行估值，然而估值需要人工来完成，所以受人的经验影响很大。 蓝屏抠图的具体操作步骤如下所述：首先，将需要抠图物体置于蓝屏下，进行多次拍摄，然后对得到的图片进行抠图处理，由于背景是蓝色的，所以背景的颜色值相当于是已知的， 因为得到多张图片，相当于建立了多个方程，这样我们可以将图片的前景颜色值求出来，实现抠图操作。 (2)自然图像抠图 随着社会的发展及人们对图像要求的提高，蓝色抠图的局限性不能满足电影制作等需要，因为电影制作往往需要从复杂的背景中提取图像，所以出现了自然抠图技术，相比蓝屏抠图，自然抠图是一种难度比较大的抠图技术。 字抠图技术的研究目的和应用范围 在现实生活的一些图像中，这些图像中的物体有可能含有比较细微的部分，如含有毛发的图像，其边缘所占的空间往往不到一个像素点，如图 1 1所示图 9 样会使致字图像出现这种情 况：在交界处上的像素点所获得的颜色值往往由前景和背景的颜色值所共同决定的传统的图像分割技术不能解决这种含有细微物体的图像分割问题对于上述问题，学者提出了数字枢图技术来解决上述问题，该方法是基于透明度的。该方法能够把该像素点的前景颜色值和背景颜色值区分开来，从而将该像素点的颜色值计算出来，从而将边界区域的图像点的颜色值求出来，解决了上述问题。 （ a）原图像 （ b） 图 发等细微物体示例 随着人类社会的不断进步和发展，各种各样的信息进入人们日常生活的各个方面由于计算机科学的不断发展、计算机硬件的更新换代、数学以及相关学科取得突破，计算机科学特别是图像处理技术得到了迅猛发展。借助计算机相关技术，人们可以营造出五彩缤纷、多姿多彩的视觉效果来丰富我们的生活 10 近年来数字处理技术在各个领域得到了深入的研究井得到广泛应用图像抠图技术 不仅应用于电影制作中，还广泛应用于包括农业生产、医疗等领域在内的许多行业例如，在卫星拍摄获得的图片中，运用图像处理技术将农田中的农作物做抠图处理，用于估计农产品的产量在医学中将核磁共振图像中特定的器官做拒图处理，用于疾病的诊断等。从抠图的发展历史来看，电影特效制作以及在其他领域的应用是推动抠圈技术持续发展的重要力。近年来，图像处理技术在现代社会中应用越来越广泛，已经深入到生活中的各个方面在空间探测、遥感、医疗图像、三维场景重建、视频图像压缩、电影特效制作、数字电视、电脑电子游戏等方面，都需要数字图像的支持 ，井推动了数字图像处理技术的发展。所以，致字图像拒图技术在电影制作、农业、医疗等方面有着潜在的、巨大的科研价值和商业价值，是未来数字图像处理的一个重要方面。不同的抠图方法有其自身的优缺点以及适用的场合 ,没有哪一种通用的方法可以解决所有的问题 ,研究人员只能对出现的每一种困难找出其对应的解决方法。人们总是希望计算机能够既快又好地对任意复杂的图像进行抠图 ,但目前离这个目标还相差很远，导致这个问题的原因一方面是由于计算机的计算能力有限 ,另一方面是由于人工智能还远未达到可以解决这个问题的程度，复杂图像抠图技术及其在真 实感图形绘制技术、视频编辑处理以及多媒体制作等领域中的应用 ,将是今后一段时间内的研究热点。 22 第二章 半透明灰度物体的抠图 屏抠图问题描述 首先， 我们考虑背景为最简单的情况 单一背景。而在蓝色背景采集前景的方法下采集，称作蓝屏抠图。 根据图像抠图公式 C= F+(1B （ 1） 我们可以初步得出： 在蓝屏抠图中， C 和 B 已知，待求量 F 和 未知，于是我们有 间的三个分量上的方程，未知量包括前景 F 的三个分量以及 ，共四个，因此在理论上和一般背景下的抠图问题一样，仍然不可解。因此，需要附加额外的约束条件来解决蓝屏抠图问题。 在 理想抠图问题的 C ,F 和 B 三点共线 ,在这种情况下 ,可以准确地计算出值，在式 (1) 中 ,由于在 R,G,B 3 个通道上可以建立 3 个方程 ,共有 10 个未知量 ,因此有方程组 (1 )r r B (2) (1 )g g B (3) (1 )b b B (4) 我们称之为图像合成公式。 图技术 一种被广泛应用的蓝屏抠图技术，是 开发的 图设备所采用的方法。该设备所集成的算法采用 设 作为约束条件，前景物体的 B 值和 G 值满足关系：2a F，其中，为可调参数，其 值为 121 ( ) a C ，1 抠图 12 技术 ，并列举了三种附加约束条件的例子，它们均存在唯一的抠图结果。他们进而证明，如果能在两张任意对应像素点都不同的背景屏幕下拍摄前景物体，则可以得到关于前景物体抠图的唯一结果。但是，这种方法仅仅在能够两次拍摄同一个不动物体的条件下才有 效，对场景要求较高，不适合于实时性抠图以及视频抠图。 前景和背景样本点划定大致的范围，然后采用统计方法对透明度值进行估计。该方法同样不适合于适时性抠图。 设已知前景中 R,G, 合图像合成公式（方程组（ 2）（ 3）（ 4）可以推出每一点的 计算公式为 121 ( ) a C (5) 其中 , 景物体的 B 值和 G 值满足关系：2a F，其中，为可 调参数； 用户通过调节参数1a 可获得一个满意的抠图结果。 图技术 且实现速度很快。他们采用了两种近似的方法，对实际蓝屏中图像的每一点，将其由 各个点计算其 h (色调 )分量，并对其设定两个阈值，通过对阈值大小的比较来判断出蓝屏图像中 的点是背景点还是前景点。为解决前景物体边缘的问题， 实际蓝屏中图像的每一点计算蓝色分量与另外两个分量的距离，并设定两个阈值12则判断该点为背景点 ( 0 )，若1则为前景点 ( 1 )，若12V d V，则判定该点为前景物体边界线上的点，具有一定的透明度值，即 01，由此再根据合成公式进行合成，可得到较好的效果。此方法的缺陷是无法解决前景物体为透明物体的问题，而且需要手工设定参数1 13 下面是 图的两种算法步骤： （ 1） 对实际蓝 屏中图像的每一点，将其由 图像中每个点计算其 h 分量； 各个点设定两个阈值某点的m in m h h，则判该点为背景点 ( 0 )，否则判为不透明前景点 ( 1 )。 （ 2） 对实际蓝屏中图像的每一点计算蓝色分量与另外两个分量的距离 2d B R G (6) 定两个阈值1 2 则判断该点为背景点 ( 0 )，若1则为前景点 ( 1 )，若12V d V，则判定该点为前景物体边界线上的点，具有一定的透明度值，即 01； 据合成公式合成图像。 （ 3） 函数图 上述 函数图如图 示： 图 函数图 14 透明灰度物体的抠图技术 于半透明物体的抠图算法 对图像合成公式（方程组（ 2）（ 3）（ 4）进行处理，（ 4） 2（ 2）（ 3）得： (1 )d d B (7) 称 (7)式 为蓝屏抠图的蓝色分量与红色、绿色分量间的距离合成方程，简称距离合成方程，其中dC，像上点的合成色、前景色和背景色按照公式 (6)计算的 d 值 。 对于对背景采取单独采样，再对采样图像所有点的 d 作加权平均，我们在下一节详细介绍。而对前景物体的 2b r F F 值未知，因此对一般物体没有精确解。 度物体的抠图算法 设定两个阈值12则判断该点为背景点 ( 0 )，若1则为前景点 ( 1 )。对于12V d V的点，我们采取如下处理方式：假设前景是灰度的物体，即 0，可得 (1 ) (8) 此时 值 存在精确解，其 值为 1/ (9) 可根据此公式对灰度透明物体求解。由 （ 10） 式可以得出该方法的 函数，如图 函数相比，本方法所得到的 函数更准确，抠图效果也更好。 15 图 度物体的 函数图 景的采集 在该算法中，我们需要对蓝色背景采集一幅画面，因为在计算透明度过程中，需要用到背景的距离 对于背景区域，我们需要将颜色的亮度和色度分开处理， 以消除背景由于亮度差异过大而带来的影响。 颜色的色度信息相当于 亮度信息为其颜色矢量的长度 。 给定一个特定的背景区域，对于该区域中的一个任意点， 在 , , )c c G B， 首先将其颜色坐标归一化到 0,1 之内 ，然后将其转化到一个感知颜色空间 ( , , , )CL r g 中示颜色 C 的亮度信息，是 C 的颜色矢量长度，易知 0, 3； / L， / L， / L表示颜色 其中 2 2 2 1r g b 。令 ( , , )CH r g b ，表示颜色 C 的色度矢量方向。 对所采集背景中的每个点，计算其色度矢量，总体色度矢量即为各点色度矢量总和的平均值。 对采集背景中每个点的亮度值的计算，我们首先将整个采样区域分为 若干个子区域，按照采光强度的不同，我们可以将其分为三个子区域：最外，中间，最内。最外区域表示光照强度最弱的区域，最内区域表示光照强度最强的区域，中间区域则为光照较均匀的区域。将该三个区域赋予不同的权重。一般来说，最内和最外区域的权重相对较小，而中间区域的权重最大。令6 这三个区域的权重，于是 总体亮度即为各点亮度值的加权平均值。综合以上两点我们 有 （ 11）1w (12) 其中 N 是背景样本点的集合，而o u t m i d i i M i IW w w w ， O ， M ， I 分别为最外，中间，最内区域样本点的集合。 最后，总体背景颜色值取色度和亮度平均值的乘积值 B H L (13) 于是， 的蓝色分量值。 法的详细流程和设计 算法的详细设计步骤如下： 采集背景信息。 给定一个特定的背景区域，对于该区域中的一个任意点， 在 坐标为 ( , , )c c G B（ 1） 将其颜色坐标归一化到 0,1 之内； （ 2） 将其转化到一个感知颜色空间 ( , , , )CL r g （ 3） 对所采集背景中的每个点，计算其色度矢量，总体色度矢量即为各点色度矢量总和的平均值； （ 4）将整个采样区域分为三个子区域：最外，中间，最内，。令是 总体亮度即为各点亮度值的加权平均值。我们有 17 (1) 1w (2) 其中 N 是背景样本点的集合，而o u t m i d i i M i IW w w w ， O ， M ， I 分别为最外，中间，最内区域样本点的集合； （ 5）总体背景颜色值取色度和亮度平 均值的乘积值 B H L (3) 这样可以求出背景的距离 建立图像合成公式 ( 1 )r r B （ 4） ( 1 )g g B （ 5） (1 )b b B （ 6） 据此建立距离合成方程： （ 6） *2-（ 4） -（ 5）得出 (1 )d d B （ 7） 计算 实际蓝屏中图像的每一点的蓝色分量与另外两个分量的距离 d 2d B R G （ 8） 并设定两个阈值1 将 d 与阈值1 18 （ 1） 若2则判断该点为背景点 ( 0 )， （ 2） 若1则为前景点 ( 1 )， （ 3） 若12V d V，则 假设前景是灰度的物体，即 0，计算得 (1 )， 此时 值 存在精确解，其 值为 1/。 可根据此公式对灰度透明物体求解； 结束。 至此，本文的半透明灰度物体算法已描述完毕。 22 第三章 抠图与合成的效果及比较 述 经过对本文的三种基于蓝屏情况下的半透明物体抠图方法的研究和对比，本文得出以下结论： （ 1） 算法是采用 过对参数的调节来得到关于前景抠图的结果。 这种方法简单、易于实现 ,但需要一个有经验的专家来调整参数 ,要求有很高的调试技巧。 （ 2） 实验条件要求较低，而且实现速度很快 。此方法通过对阈值的设定来判断蓝屏图像上的每一个点，从而通过图像合成公式合成图像的结果。此方法可以得到较好的效果，它的缺陷是无法解决前景物体为透明物体的问题，而且需要手工设定参数1 （ 3） 本文所描述的半透明灰度物体抠图技术是通过对图像合成公式进行处理，得到距离合成公式，从而设定阈值，对图像进行处理。与 函数相比，本方法所得到的 函数更准确，抠图效果也更好。 表 种半透明物体抠图技术的对比 算法名称 优点 缺点 简单、易于实现，之前已被广泛应用于 需要一个有经验的专家来调整参数 ,要求有很高的调试技巧 对实验条件要求较 低，实现速度很快，抠图效果较前者更好 无法解决前景物体为透明物体的问题，需要手工设定参数10 本文所述抠图技术 易于实施，且实验得到的 函数更准确，抠图效果较前者更好 抠图效果还有待加强和改善 表 函数的对比 算 法名称 函数图 对比结果 与 图方法中1 函数相比，本文所述抠图方法所得到的 函数更准确，抠图效果也更好。 本文算法 图与合成效果 表 本算法和 前