智能车牌识别及其应用资料

1、2022-5-301http:/2022-5-301http:/智能车牌识别及其应用潘越峰潘越峰 20142014年年1 1月月2323日日2022-5-302http:/2022-5-302http:/1智能车牌识别技术篇2智能车牌识别应用篇2022-5-303http:/1、智能车牌识别技术篇2022-5-304http:/2022-5-304http:/车牌识别应用示意图车牌识别应用示意图2022-5-305http:/2022-5-305http:/车牌识别流程示意图车牌识别流程示意图2022-5-306http:/2022-5-306http:/1.1图像采集1.2车牌定位1.3字符

2、分割1.4字符识别1.5问题讨论2022-5-307http:/1.1 图像采集2022-5-308http:/2022-5-308http:/采用高清采用高清CCDCCD、高分辨率、覆盖视场大、高分辨率、覆盖视场大n CCD CCD 电荷耦合器件（电荷耦合器件（Charge Coupled Device)Charge Coupled Device)n CMOS CMOS 互补金属氧化物半导体（互补金属氧化物半导体（Complementary Metal Oxide SemiconductorComplementary Metal Oxide Semiconductor) )2022-5-30

3、9http:/2022-5-309http:/快门技术，解决高速运动车辆的拖尾现象快门技术，解决高速运动车辆的拖尾现象高速电子快门高速电子快门 通过DSP控制CCD感光时间的方式来实现画面亮度的控制2022-5-3010http:/2022-5-3010http:/辅助光源系统，助全天候高清抓拍辅助光源系统，助全天候高清抓拍 疝气闪光灯疝气闪光灯 疝气频闪灯疝气频闪灯 LEDLED频闪灯、闪光灯频闪灯、闪光灯 2022-5-3011http:/2022-5-3011http:/主动控制曝光技术，解决逆光和强光主动控制曝光技术，解决逆光和强光逆光补偿逆光补偿在光线较弱的环境下，背景较暗的区域，也

4、能够得到比较清晰的画面。强光抑制强光抑制把强光部分弱化，把暗光部分亮化，达到光线平衡。2022-5-3012http:/1.2 车牌定位2022-5-3013http:/2022-5-3013http:/车辆检测技术车辆检测技术传统检测技术：线圈、雷达、视频线圈雷达视频2022-5-3014http:/2022-5-3014http:/车辆检测技术车辆检测技术新兴检测技术：地磁、激光、红外地磁激光红外2022-5-3015http:/2022-5-3015http:/车辆视频检测算法车辆视频检测算法常用视频检测算法常用视频检测算法-帧间差分法、背景差分法、检测线法、车辆3D建模检测线法3D建模

5、2022-5-3016http:/2022-5-3016http:/常用车辆视频检测算法对比常用车辆视频检测算法对比视频视频检测算法检测算法原理原理优点优点缺点缺点帧间帧间差分法差分法基于运动图像序列中，相邻两帧图像间具有强相关性而提出的检测算法，将前后两帧图像对应像素点的灰度值相减，若灰度值很小，可认为无车经过。对光照变化不敏感，适合动态变化的环境，实时性要求较高对静止或运动速度较慢的物体无法检测。背景背景差分法差分法选取背景中的一幅或几幅图像的平均作为背景图像，然后把以后的序列图像当前帧和背景图像相减进行背景消去，若所得到的像素大于某一个阈值，则判定被监视场景中有运动物体。对于复杂背景下的

6、运动物体检测效果较好，一般能够提供最完整的的特征数据，计算量小，实用价值大。受光线、天气等外界条件的影响较大。检测检测线法线法在待测图像上的合适位置，设置检测线，类似地感线圈，其方向与车辆行驶方向垂直，当运动物体覆盖检测线的宽度大于某一阈值就检测到车辆。一种简单有效地检测车辆的算法，在高速公路这样的简单交通场景可以取得较好的检测结果。不太适合用于行驶行为复杂的场合如十字路口这样的交通场景，能获取的交通参数种类较少。3D3D建建模模对运动车辆进行3D建模，然后采用车辆识别的方法进行识别和跟踪。车辆是刚性材料，外型的线条感和轮廓感很强，当车辆经过监控检测区域时，系统会对车辆的外在轮廓进行检测，将检

7、测出来的线条进行拼装组合即为车辆的3D模型3D模型有受光照影响小、受阴影影响小、抗抖动性好等特点。如何提出较好的模型来对运动车辆进行建模，建模的好与坏直接影响检测结果。 2022-5-3017http:/2022-5-3017http:/车辆跟踪算法车辆跟踪算法常用车辆跟踪算法常用车辆跟踪算法-基于车辆模型的跟踪-基于车辆区域的跟踪-基于车辆轮廓的跟踪-基于车辆特征的跟踪2022-5-3018http:/2022-5-3018http:/常用车辆跟踪算法对比常用车辆跟踪算法对比车辆跟车辆跟踪算法踪算法原理原理优点优点缺点缺点车辆模车辆模型型建立在精细提取已知车辆的3D模型与待检测图像之间的匹配

8、操作在确定车辆类型和几何模型细节时准确度高对车辆模型的过分依赖，而很明显的是不可能为公路上行驶的每种车辆都建立精细的模型，计算量大，不利于实时处理。车辆车辆区区域域该算法中车辆被表示成斑点，或像素连通块，或块区域，连接区域被提取并根据情况被合并或分割。车辆稀少时效果很好，且块区域可以提供丰富的如大小、形状和密度等区域的合并和分割存在着不准确性。在阴影和道路拥挤的情况下效果较差，造成漏检和误检。车辆轮车辆轮廓廓先初始勾勒出车辆的轮廓，并且不断地在后续帧更新轮廓进而达到跟踪的目的。基于区域算法的一个变形。与区域算法相比在于计算量低。初始化困难，在阴影和拥塞情况下效果欠佳。车辆特车辆特征征将车辆的特

9、征作为最小跟踪单元，对每辆车提取一些特征，这些特征可以是点、线或曲线，可能代表车辆的保险杆，车窗，车顶棚等或将这些特征组合来表示一辆车。即使存在部分遮挡，一些特征仍旧可见，可以为跟踪过程提供依据。在检测每个车辆的特征时也同样存在车辆彼此太接近，无法正确提取的问题。 2022-5-3019http:/2022-5-3019http:/常见车牌标准常见车牌标准车牌先验知识车牌先验知识2022-5-3020http:/2022-5-3020http:/车牌定位车牌定位定位流程定位流程- 初步定位、精确定位常见常见定位算法定位算法-基于边缘检测的车牌定位-基于彩色分割的车牌定位-基于小波变换的车牌定位

10、-基于遗传算法的车牌定位-基于数学形态的车牌定位-基于灰度图像文理特征分析的车牌定位-基于帧差的视频图像车牌定位2022-5-3021http:/2022-5-3021http:/常见车牌初定位算法对比表常见车牌初定位算法对比表车车牌牌定位定位算算法法原理原理优点优点缺点缺点边缘边缘检测检测所谓边缘就是指其周围像素灰度有阶跃变化的那些像素的集合。边缘的两侧分属于两个区域，每个区域的灰度均匀一致，而这两个区域的灰度在特征上存在一定的差异。边缘检测的任务是精确定位边缘和抑制噪声。定位准确率较高，反应时间短，能有效去掉噪声，适合与包含多个车牌的图像，在多车牌图像的情况下定位速度也很快。对车牌严重褪色

11、的情况下，由于检测不到字符笔画的边缘会导致定位失败，在有外界干扰以及车牌倾斜时，定位后的区域比车牌稍大。彩色彩色分割分割基于彩色分割的车牌定位方法由彩色分割和目标定位等模块组成，采用多层感知器网络对彩色图像进行分割，然后通过投影法分割出潜在的车牌区域。算法正确率较高若车牌区域颜色与附近颜色相似时，计算速度较慢数学数学形态学形态学具有一定形态的结构元素去量度和提取图像中的对应形状以达到图像分析和识别的目的。该算法不能精确确定车牌左右边界的位置，因此必须结合其他定位方法进行精确定位。即使存在部分遮挡，一些特征仍旧可见，可以为跟踪过程提供依据。在检测每个车辆的特征时也同样存在车辆彼此太接近，无法正确

12、提取的问题。灰度灰度图像文图像文理特征理特征先对图像进行预处理，将彩色图像转换为灰度图像，然后进行行扫描，找出图像中每一行所含有的车牌线段，记录下它们的起始坐标和长度，如果有连续若干行均存在不少于一个的车牌线段，且行数大于某一确定的阈值，则认为在行的方向上找到了车牌一个候选区域，并确定该候选区域的起始行和高度；同理对列扫描，最终确定一个车牌区域。对于牌照倾斜或变形以及光照不均，偏弱或偏强有很好的效果。对于噪声敏感、对于背景复杂的图像需结合其他方法得到真正的车牌区域。2022-5-3022http:/2022-5-3022http:/车牌精定位车牌精定位HoughHough变换：变换：检找出车牌

13、图像中满足条件的直线，并依此直线的角度作为车牌的倾斜角度。精定位上下左右边界：精定位上下左右边界：根据车牌图像字符区域明暗交替出现的特征来确定上下边界；采用颜色二值化和纹理方法相结合的办法来定位车牌左右边界RadonRadon变换：变换：对图像采用投影的方法检测投影高度和投影的目标像素的峰值，找到投影面积满足最佳条件时的投影角度。2022-5-3023http:/1.3 字符分割 2022-5-3024http:/2022-5-3024http:/车牌图像预处理车牌图像预处理车牌字符区域灰度化二值化去噪2022-5-3025http:/2022-5-3025http:/车牌图像预处理车牌图像预

14、处理灰度化：灰度化： 将彩色图像转化成为灰度图像的过程成为图像的灰度化处理。彩图转化为256个灰度级黑白图像，只保留亮度，去除色彩，减少图像处理的运算量。二值化：二值化： 图像的二值化处理就是讲图像上的点的灰度置为0或255，也就是讲整个图像呈现出明显的黑白效果。即将256个亮度等级的灰度图像通过适当的阀值选取而获得仍然可以反映图像整体和局部特征的二值化图像。去噪（滤波）：去噪（滤波）： 图像信息在采集过程中往往受到各种噪声源的干扰，这些噪声在图像上的常常表现为一些孤立像素点，这可理解为像素的灰度是空间相关的，即噪声点像素灰度与它们临近像素的灰度有着显著不同。这种干扰或孤立像素点如不经过滤波处

15、理，会对以后的图像区域分割、分析和判断带来影响。2022-5-3026http:/2022-5-3026http:/垂直投影法垂直投影法基本原理：基本原理： 对车牌灰度图像进行灰度垂直投影，可以清晰地看出7个区域，即车牌的7个字符灰度图像的垂直投影，通过垂直投影图特征，分割字符就转化为只需得到每个区域的左右边界即可。优点：优点： 变形不是很严重的车牌能很好的分割缺点：缺点： 对铆钉、字符粘连及车牌左右边框等噪声比较敏感2022-5-3027http:/2022-5-3027http:/模板匹配法模板匹配法车牌字符特点车牌字符特点： 一般牌照字符共有7个，并且长宽高以及字符间距都符合一定的标准。

16、基本原理：基本原理： 在精确定位车牌字符的上下边界后，以图示模板，从左往右扫描车牌图像，需求落在字符区域与字符间空隙区域白色像素的最大差值，将字符分割出来。 优点：优点： 很好的解决图像二值化后字符粘连及铆钉等的干扰。缺点：缺点：车辆图像尺寸必须很规范。2022-5-3028http:/1.4 字符识别2022-5-3029http:/2022-5-3029http:/字符识别原理字符识别原理基本思想：基本思想：匹配判别，抽取代表未知字符模式本质的各种特征和预先存储在机器中的标准字符的字典逐一匹配，用一定的准则进行判别。2022-5-3030http:/2022-5-3030http:/基于模

17、板匹配的识别方法基于模板匹配的识别方法基本思想：基本思想：先在图像中检测出已知形状的目标物，然后用这个目标物的形状模板与图像匹配，在约定的准则下检测出目标图像。优点：优点： 简单成熟，对于标准、规范的字符识别效果较好。缺点：缺点： 复杂环境下识别效果较差，且自适应不强。2022-5-3031http:/2022-5-3031http:/基于神经网络的识别方法基于神经网络的识别方法基本思想：基本思想：先将图像中各个大小不同分布不规则的字符变成一个个大小相同，排列整齐的字符；从这些字符中提取最能体现这个字符特点的特征向量，代入到训练好的神经网络中，就可以正确识别出字符。样本训练：样本训练：对精心选

18、择的可以很好的反应样本可分性的已知数据精心特征提取，送入神经网络进行训练，经训练最后的神经网络就可以用它对待识别数据进行识别。2022-5-3032http:/1.5 问题讨论2022-5-3033http:/2022-5-3033http:/问题讨论问题讨论问题问题1 1：车牌上的小圆点，如果抠掉了，能否正确识别车牌？问题问题2 2：车牌被遮挡之后，能否抓拍到车辆？2022-5-3034http:/2、智能车牌识别应用篇2022-5-3035http:/2022-5-3035http:/2.1车流量统计2.2电子警察2.3布控报警2.4套牌分析2.5多区域碰撞分析2.6问题讨论2022-5-

19、3036http:/2.1 车流量统计2022-5-3037http:/2022-5-3037http:/车流量统计车流量统计基本原理基本原理- 单个监控点通过抓拍车辆，统计以车道为单位的过车数量，完成按小时、天、月为周期的流量统计。2022-5-3038http:/2.2 电子警察2022-5-3039http:/2022-5-3039http:/电子警察电子警察什么是电子警察什么是电子警察- 俗称“闯红灯自动记录系统”，即可安装在信号控制的交叉路口和路段上并对指定车道内机动车闯红灯行为进行不间断自动检测和记录的系统。基本原理基本原理-线圈或视频实时车辆检测。-实时抓拍违法车辆-车辆跟踪、车

20、牌识别以及录像和存储2022-5-3040http:/2022-5-3040http:/闯红灯等违法行为检测闯红灯等违法行为检测闯红灯三要素：闯红灯三要素： -车牌号码、停止线和红灯信号违法行为：违法行为： -闯红灯、不按车道行驶、违法禁令标志2022-5-3041http:/2.3 布控报警2022-5-3042http:/2022-5-3042http:/黑名单和布控黑名单和布控黑名单黑名单- “黑名单”库是将所关注的交通违法、肇事犯罪嫌疑等车辆信息进行汇总的专门数据库。车辆信息包括车牌、车型、车身颜色及其他关联信息等。布控布控- 查缉布控是对各类嫌疑车辆进行布控报警，及时实施拦截处置的过程。查缉布控是“黑名单”库的主要应用。2022-5-3043http:/2022-5-3043http:/布控流程布控流程录入黑名单车辆录入黑名单车辆下发黑名单下发黑名单系统进入实时比对系统进入实时比对所有车辆抓拍所有车辆抓拍系统实时比对系统实时比对成功匹配成功匹配实时报警实时报警2022-5-3044http:/2.4 套牌分析2022-5-3045http:/2022-5-3045http:/什么是套牌什么是套牌套牌套牌-套用别人的车牌套套牌分析的原则牌分析的原则-同一辆车前后车牌不可能不一致