智能车牌识别及其应用课件

1、智能车牌识别及其应用潘越峰 2014年1月23日（PPT名称20号黑体）（日期10号黑体）（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）1智能车牌识别技术篇2智能车牌识别应用篇1、智能车牌识别技术篇车牌识别应用示意图（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）车牌识别流程示意图（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）1.1 图像采集采用高清CCD、高分辨率、覆盖视场大（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）CCD 电荷耦合器件（Charge Coupled Device

2、)CMOS 互补金属氧化物半导体（Complementary Metal Oxide Semiconductor)辅助光源系统，助全天候高清抓拍 （大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）疝气闪光灯 疝气频闪灯 LED频闪灯、闪光灯 主动控制曝光技术，解决逆光和强光（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）逆光补偿在光线较弱的环境下，背景较暗的区域，也能够得到比较清晰的画面。强光抑制把强光部分弱化，把暗光部分亮化，达到光线平衡。1.2 车牌定位车辆检测技术（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）新

3、兴检测技术：地磁、激光、红外地磁激光红外车辆视频检测算法（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）常用视频检测算法帧间差分法、背景差分法、检测线法、车辆3D建模检测线法3D建模车辆跟踪算法（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）常用车辆跟踪算法基于车辆模型的跟踪基于车辆区域的跟踪基于车辆轮廓的跟踪基于车辆特征的跟踪常用车辆跟踪算法对比（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）车辆跟踪算法原理优点缺点车辆模型建立在精细提取已知车辆的3D模型与待检测图像之间的匹配操作在确定车辆类型和几何模型细节时准确

4、度高对车辆模型的过分依赖，而很明显的是不可能为公路上行驶的每种车辆都建立精细的模型，计算量大，不利于实时处理。车辆区域该算法中车辆被表示成斑点，或像素连通块，或块区域，连接区域被提取并根据情况被合并或分割。车辆稀少时效果很好，且块区域可以提供丰富的如大小、形状和密度等区域的合并和分割存在着不准确性。在阴影和道路拥挤的情况下效果较差，造成漏检和误检。车辆轮廓先初始勾勒出车辆的轮廓，并且不断地在后续帧更新轮廓进而达到跟踪的目的。基于区域算法的一个变形。与区域算法相比在于计算量低。初始化困难，在阴影和拥塞情况下效果欠佳。车辆特征将车辆的特征作为最小跟踪单元，对每辆车提取一些特征，这些特征可以是点、线

5、或曲线，可能代表车辆的保险杆，车窗，车顶棚等或将这些特征组合来表示一辆车。即使存在部分遮挡，一些特征仍旧可见，可以为跟踪过程提供依据。在检测每个车辆的特征时也同样存在车辆彼此太接近，无法正确提取的问题。常见车牌标准车牌先验知识（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）车牌定位（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）定位流程- 初步定位、精确定位常见定位算法基于边缘检测的车牌定位基于彩色分割的车牌定位基于小波变换的车牌定位基于遗传算法的车牌定位基于数学形态的车牌定位基于灰度图像文理特征分析的车牌定位基于帧差的视频图像车牌定位常见车

6、牌初定位算法对比表（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）车牌定位算法原理优点缺点边缘检测所谓边缘就是指其周围像素灰度有阶跃变化的那些像素的集合。边缘的两侧分属于两个区域，每个区域的灰度均匀一致，而这两个区域的灰度在特征上存在一定的差异。边缘检测的任务是精确定位边缘和抑制噪声。定位准确率较高，反应时间短，能有效去掉噪声，适合与包含多个车牌的图像，在多车牌图像的情况下定位速度也很快。对车牌严重褪色的情况下，由于检测不到字符笔画的边缘会导致定位失败，在有外界干扰以及车牌倾斜时，定位后的区域比车牌稍大。彩色分割基于彩色分割的车牌定位方法由彩色分割和目标定位等模块组成

7、，采用多层感知器网络对彩色图像进行分割，然后通过投影法分割出潜在的车牌区域。算法正确率较高若车牌区域颜色与附近颜色相似时，计算速度较慢数学形态学具有一定形态的结构元素去量度和提取图像中的对应形状以达到图像分析和识别的目的。该算法不能精确确定车牌左右边界的位置，因此必须结合其他定位方法进行精确定位。即使存在部分遮挡，一些特征仍旧可见，可以为跟踪过程提供依据。在检测每个车辆的特征时也同样存在车辆彼此太接近，无法正确提取的问题。灰度图像文理特征先对图像进行预处理，将彩色图像转换为灰度图像，然后进行行扫描，找出图像中每一行所含有的车牌线段，记录下它们的起始坐标和长度，如果有连续若干行均存在不少于一个的

8、车牌线段，且行数大于某一确定的阈值，则认为在行的方向上找到了车牌一个候选区域，并确定该候选区域的起始行和高度；同理对列扫描，最终确定一个车牌区域。对于牌照倾斜或变形以及光照不均，偏弱或偏强有很好的效果。对于噪声敏感、对于背景复杂的图像需结合其他方法得到真正的车牌区域。车牌精定位（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）Hough变换：检找出车牌图像中满足条件的直线，并依此直线的角度作为车牌的倾斜角度。精定位上下左右边界：根据车牌图像字符区域明暗交替出现的特征来确定上下边界；采用颜色二值化和纹理方法相结合的办法来定位车牌左右边界Radon变换：对图像采用投影的方法

9、检测投影高度和投影的目标像素的峰值，找到投影面积满足最佳条件时的投影角度。车牌图像预处理（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）车牌字符区域灰度化二值化去噪车牌图像预处理（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）灰度化： 将彩色图像转化成为灰度图像的过程成为图像的灰度化处理。彩图转化为256个灰度级黑白图像，只保留亮度，去除色彩，减少图像处理的运算量。二值化： 图像的二值化处理就是讲图像上的点的灰度置为0或255，也就是讲整个图像呈现出明显的黑白效果。即将256个亮度等级的灰度图像通过适当的阀值选取而获得仍然可以反映图像整体和局

10、部特征的二值化图像。去噪（滤波）： 图像信息在采集过程中往往受到各种噪声源的干扰，这些噪声在图像上的常常表现为一些孤立像素点，这可理解为像素的灰度是空间相关的，即噪声点像素灰度与它们临近像素的灰度有着显著不同。这种干扰或孤立像素点如不经过滤波处理，会对以后的图像区域分割、分析和判断带来影响。模板匹配法（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）车牌字符特点： 一般牌照字符共有7个，并且长宽高以及字符间距都符合一定的标准。基本原理： 在精确定位车牌字符的上下边界后，以图示模板，从左往右扫描车牌图像，需求落在字符区域与字符间空隙区域白色像素的最大差值，将字符分割出来。

11、 优点： 很好的解决图像二值化后字符粘连及铆钉等的干扰。缺点：车辆图像尺寸必须很规范。1.4 字符识别字符识别原理（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）基本思想：匹配判别，抽取代表未知字符模式本质的各种特征和预先存储在机器中的标准字符的字典逐一匹配，用一定的准则进行判别。基于模板匹配的识别方法（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）基本思想：先在图像中检测出已知形状的目标物，然后用这个目标物的形状模板与图像匹配，在约定的准则下检测出目标图像。优点： 简单成熟，对于标准、规范的字符识别效果较好。缺点： 复杂环境下识别效果较差，

12、且自适应不强。基于神经网络的识别方法（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）基本思想：先将图像中各个大小不同分布不规则的字符变成一个个大小相同，排列整齐的字符；从这些字符中提取最能体现这个字符特点的特征向量，代入到训练好的神经网络中，就可以正确识别出字符。样本训练：对精心选择的可以很好的反应样本可分性的已知数据精心特征提取，送入神经网络进行训练，经训练最后的神经网络就可以用它对待识别数据进行识别。1.5 问题讨论问题讨论（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）问题1：车牌上的小圆点，如果抠掉了，能否正确识别车牌？问题2：车牌被

13、遮挡之后，能否抓拍到车辆？2、智能车牌识别应用篇2.1车流量统计2.2电子警察2.3布控报警2.4套牌分析2.5多区域碰撞分析2.6问题讨论2.1 车流量统计车流量统计（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）基本原理- 单个监控点通过抓拍车辆，统计以车道为单位的过车数量，完成按小时、天、月为周期的流量统计。2.2 电子警察电子警察（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）什么是电子警察- 俗称“闯红灯自动记录系统”，即可安装在信号控制的交叉路口和路段上并对指定车道内机动车闯红灯行为进行不间断自动检测和记录的系统。基本原理线圈或视

14、频实时车辆检测。实时抓拍违法车辆车辆跟踪、车牌识别以及录像和存储闯红灯等违法行为检测（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）闯红灯三要素： 车牌号码、停止线和红灯信号违法行为： 闯红灯、不按车道行驶、违法禁令标志2.3 布控报警黑名单和布控（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）黑名单“黑名单”库是将所关注的交通违法、肇事犯罪嫌疑等车辆信息进行汇总的专门数据库。车辆信息包括车牌、车型、车身颜色及其他关联信息等。布控查缉布控是对各类嫌疑车辆进行布控报警，及时实施拦截处置的过程。查缉布控是“黑名单”库的主要应用。布控流程（大标题2

15、0号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）录入黑名单车辆下发黑名单系统进入实时比对所有车辆抓拍系统实时比对成功匹配实时报警2.4 套牌分析什么是套牌（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）套牌套用别人的车牌套牌分析的原则同一辆车前后车牌不可能不一致：前后抓拍车辆车牌进行一致性检查。一个车辆号牌的车辆不可能有两种车身颜色或车辆类型：同一车辆号牌的车其车身颜色或车辆类型进行比较或通过与交管系统登记注册的车辆信息比较一个车辆号牌的车辆不可能“同时”出现在两个不同的地点：实时比对分析。2.5 多区域碰撞分析什么是多区域车辆碰撞分析？（大标题20号黑体）（二级标题12号黑体）（正文9号黑体）（行距1.5倍）多区域车辆碰撞分析- 在一些作案手法相似的连环案件中，将多个事发地附近、系统检测到的车辆号牌、进行比对，根据车辆出现的概率进行嫌疑车辆区域关联性分析，从而找出新的嫌疑车辆线索。公安业务过程根据案件信息框定多个事发地；根据已设卡点情况勾勒通行路径；计算出行频次较多的车辆；调阅现场照片和视频，实施布控抓捕