车辆图像智能分析器解决方案

1、车辆图像智能分析器（Cars）解决方案1 概述车辆图像智能分析器基于图像视频的车辆复合信息识别技术，实现对车辆多种特征的提取及识别，包括车辆特征（类型、品牌、型号、颜色等）识别、局部显著特征（异常遮阳板等）提取、遮挡号牌辨识等，帮助交警尽快地、准确地进行处理、打击假套牌车，减少群众经济损失和社会问题。并根据刑侦、治安、交通等各警种的需要，建立有关的车辆信息库，如假套牌车库、车辆违法信息、车辆异常行为库等，将有效的车辆图像信息保留到相关信息库，再清除无效数据，充分挖掘潜力，最大化发挥的效益。2 系统架构及功能介绍2.1 系统架构图1 系统的逻辑架构图2.2 系统功能2.2.1 车辆图像智能识别系

2、统（1） 车辆图像读取读取各种符合一定分辨率和光照条件的治安卡口、电子警察、区间测速、视频抓拍、数码拍照获取的车辆图像，以及其他相关信息。具体包括：n 治安卡口抓拍的车辆正面、背面（如有则读）图像；n 电子警察抓拍车辆违反交通信号灯、违反标志标线的单张或多张图像组合；n 测速设备（包括区间测速）抓拍的车辆正面或背面图像；n 指挥中心民警通过视频监控远程手工抓拍的车辆全景/近景图像；n 民警在路面利用数码相机拍摄的车辆违反规定停车的正侧面和背侧面图像。n 以上车辆图像读取包括在线图像抽取和离线图像拷贝两种形式，在线车辆图像抽取的速度不低于0.9万张/分钟，离线图像拷贝的速度不低于1万张/分钟。（

3、2） 车辆图像智能识别对违法车辆图片，实现以下智能识别功能：n 车辆图像有效性判别：判别图像成像效果，对无车辆的图片进行过滤，标注为“无效图片”。有较完整车辆的进行后续识别。n 车辆多特征识别：识别车辆车牌号码、车牌颜色、车辆类型（大型车、小轿车、小货车/面包车、摩托车等）、车身颜色、品牌、型号、款式。n 车牌异常识别：识别无牌、遮挡号牌车辆，进行“无牌车辆”、“遮挡号牌嫌疑车辆”标注。n 车辆登记信息联网比对：在车辆特征识别过程中，通过网络将自动识别的车辆特征与车辆登记特征进行比对，发现二者特征明显不符的记录，显示其车辆特征信息与车辆登记库的详细信息、图片信息，由人工确认。可按号牌号码、号牌

4、种类浏览查询。n 假套牌车辆报警：通过联网与车辆登记信息进行多种特征比对，发现存在假套牌嫌疑的车辆记录时，系统自动给出报警信息，显示其车辆特征信息与车辆登记库的详细信息、图片信息，由人工确认。可按时间、地点、号牌号码、号牌种类、车身颜色、品牌型号等浏览查询。n 假套牌车辆查证：通过人工输入完整车辆号牌信息，根据车辆图像特征和车辆登记信息，可查询车辆是否为假套牌车辆。对车辆号牌信息不完整的车辆图像（遮挡1-2位号牌字符），可通过输入不完整车辆号牌信息，并输入车身颜色、车辆品牌、型号等特征信息，从车辆登记信息库中查找出特征匹配的车辆，通过人工分析确认被遮挡的字符，协助查证车辆的真实身份。n 特定条

5、件（车牌号码异常等）嫌疑车辆筛查：通过人工输入车辆的号牌、车身颜色、车辆品牌、型号等一个或多个特征，自动从指定嫌疑车辆库中将特征符合的车辆筛查出来，供人工核对，确认。（3） 分析结果预处理n 车辆特征提取：分为“有效图片”和“无效图片”两类，对有效图片，提取该车辆的号牌种类、号牌号码、车辆类型、车身颜色、厂牌、型号、款式、车牌异常情况（正常、无牌、遮挡号牌）。n 登记信息提取：对提取的号牌号码完整的车辆，提取该车辆的登记信息，包括厂牌型号、使用性质、车主姓名、车辆状态、车身颜色、车辆类型、年检有效期止、有效期止、联系电话、详细住址、发牌机关和车辆登记图片（没有登记图片的，提取该车辆同一厂牌型号

6、的目录图片）。n 图片信息提取：根据图片的目录和图片包含的信息，提取车辆违法地点、违法时间、行驶速度等信息。n 车辆图像处理：图片压缩：如果图片文件过大（比如超过500K以上），在不明显损失图像质量的情况下，对图片进行压缩，减小图片存储量，方便上传和存储。图片合成：根据应用要求，可将一宗违法的多张（2，3，4张）图片合成一张违法图片。n 车辆图像分类：根据已提取的车辆特征和车辆登记信息，将违法车辆图片分类为“无效图片”、“无牌车辆”、“遮挡号牌嫌疑车”、“假套牌嫌疑车”、“特种号牌车辆”和“号牌正常车辆”等。2.2.2 违法车辆智能筛分与录入系统针对现在车辆违法录入（非现场）工作的流程，以车辆

7、图像智能分析系统的车辆多特征识别技术、假套牌车识别技术为基础，结合业务应用，将人工甄别和信息核对环节进行改造，开发违法车辆图片智能筛分系统。智能筛分系统对车辆违法信息进行自动识别，自动判别成像质量，自动比对车辆图像特征与登记信息，智能化地筛选出无登记信息车辆、外观与登记信息明显不符的假套牌嫌疑车辆、遮挡涂改号牌嫌疑车辆、无牌车辆，再经过人工确认和审核，确认录入的车辆违法信息。这样，既可以减少违法录入工作量和错误率，提高违法录入的工作效率，同时可以对违法车辆实现识别出假套牌车，能够大大减少民众怨言。智能筛分出的假套牌和遮挡号牌嫌疑车辆，可以快速构建、更新黑名单库，有力支持交警部门打击各种机动车假

8、牌套牌、遮挡涂改号牌等违法行为。（1） 电子警察基础信息采集采集电子警察的编号、名称、地点（经纬度）、类型（字典，可多选）、抓拍交通违法种类（字典，可多选）、管理单位、联系人、联系电话等信息，用于报表统计、违法图像筛分的预处理（如划定检测区域、图片分解与合并等）。（2） 车辆图片批量上传提供违法图片批量上传程序供业务人员把数码相机、摄像机、固定电子警察、测速系统等不能自动写入到公安网需要人工拷贝到公安网系统中的图片数据上传到服务器中。（3） 车辆图片接收服务提供图片接收服务程序供固定电子警察系统、测速系统等可以自动写入到公安网的图片数据写入接口。需要固定电子警察系统、测速系统对程序进行相应修改

9、，按标准格式写入相应的数据。（4） 车辆违法信息录入号牌正常车辆录入：录入人员查看车辆违法信息（显示自动识别的车辆资料信息）时，系统通过接口自动调出该车的登记资料信息，录入人员对违法车辆照片需要核实时，可以调出车辆登记时保存的车辆照片或车辆特征库照片；录入人员对自动识别的信息有修改时，系统把修改后的信息反馈给图像智能识别系统，供智能识别系统学习校正用；录入人员对自动识别的资料有修改时（尤其是车牌号码、车牌种类），该资料需要审核才能上传到交管系统。录入程序需要实现的功能如下：n 无效图片删除：录入人员核实无效图片，删除无效图片。n 遮挡号牌车辆录入：录入人员查看遮挡号牌车辆违法资料，在智能识别系

10、统已经确认车辆的厂牌、型号或者更多资料的情况下，系统可以自动从省交管局车辆资料简项库中进行比对，列表显示出符合条件的车辆资料，录入人员可以根据需要调出车辆的详细资料信息以及照片进行比对；在录入人员能够确认遮挡号牌车辆的真实资料情况下，保存真实车辆违法信息。录入人员不能确认遮挡号牌车辆的真实资料，保存信息到遮挡号牌车辆库中，自动生成相应的关注车辆轨迹库。n 车辆违法信息复核：正常违法车辆的录入信息进行人工复核。复核时，显示原始记录图片、车辆违法信息、车辆登记信息（文字）与车管登记车型对应的模板图像，进行人工核对、修改。复核通过的，保存到“六合一”平台（或根据业务需要保存在车辆违法信息录入系统数据

11、库13天，然后自动导入 “综合平台”）。n 车辆违法统计分析：包括违法记录查询、违法车辆类型统计、违法车辆地域统计以及工作量统计等。n 数据导出：包括作废图片、套牌车违法、无效图片、特种号牌车辆违法、各类车型违法数据、民警工作量查询的查询及数据导出。2.2.3 假套牌车辆甄别管理系统为了有力打击假套牌车、遮挡号牌等交通违法行为，需要在这些违法行为的发现、处置等环节进行业务机制的调整。假套牌车辆甄别管理系统就是专门服务于假套牌车、遮挡号牌违法行为及时发现、信息采集、处置管理的业务应用系统。与车辆图像智能分析系统的假套牌车识别技术相结合，在业务上提供智能化的假套牌和遮挡号牌车辆甄别手段，管理上缩短

12、违法行为的取证过程，从而支持快速、实时的假套牌、遮挡号牌违法行为打击，提高打击准确性和力度，起到有效震慑作用。（1） 构建关注车辆轨迹库将在交通违法录入确认、治安卡口发现、群众举报的假套牌、无牌、遮挡涂改号牌、涉案车辆、特种号牌车辆建库，形成全省关注车辆轨迹库，为打击重大交通违法和涉车犯罪打下基础。（2） 黑名单车辆轨迹库记录内容：嫌疑类型（假牌、套牌、涂改号牌、无牌、遮挡号牌、前后车牌不一致）、发现时间、发现地点、发现类型（卡口、电子警察、群众举报）、卡口（电子警察）编号、号牌种类（字典）、号牌号码（无牌时录入“无牌”、看不清楚号码用“？”代替）、车辆类型、品牌（如可识别则录）、型号（如可识

13、别则录）、年款（如可识别则录）、车身颜色（如可识别则录）、车辆图片（可多张）、违法类型（如有则录）、备注。（3） 布控车辆轨迹库记录内容：布控类别（涉案类、交通违法类）、发现时间、发现地点、发现类型（卡口、电子警察）、卡口（电子警察）编号、号牌号码、车辆类型、车身颜色（如可识别则录）、品牌（如可识别则录）、型号（如可识别则录）、年款（如可识别则录）、车辆图片（可多张）、违法类型（如有则录）、布控开始时间、布控终止时间、简要案情、布控人（姓名、联系电话）、备注。（4） 假套牌车录入录入人员查看智能识别系统排查出来的假套牌车辆违法资料，系统自动调出该车辆的真实资料，自动标出假套牌车与真实车辆的差异

14、。录入人员可以修改该资料为正常违法，在保存信息后，将进入到车辆违法信息复核岗位。录入人员人工核实后，确认该违法车辆为假套牌车辆，保存资料。（5） 假套牌车复核n 假套牌车辆复核n 遮挡号牌车辆复核（6） 假套牌车轨迹分析n 假套牌车辆轨迹查询：根据假套牌车号牌号码、号牌种类信息，通过全省集中库调出车辆行驶轨迹，以便通过行驶轨迹查询分析假套牌车集中地区，实施重点截查。n 黑名单分析：根据地点、号牌、车型分析。n 本地轨迹分析：在假套牌黑名单库进行分析，可以根据时间、地点、车牌号码查询某车的行驶轨迹。n 全省轨迹分析：在全省卡口集中库进行分析，可以根据时间、地点、车牌号码查询某车的行驶轨迹。（7）

15、 假套牌车辆缉查布控对于可实施拦截的治安卡口，车辆图像智能识别系统对抓拍图片进行分析报警，对报警信息进行确认，并出警拦截、抓捕等。（8） 假套牌车查询统计n 黑名单车辆查询统计n 综合查询统计3 应用案例结合公安业务需求，开发了新型的车辆精细特征识别系统车辆图像智能分析器，该系统在广东省公安交管、刑侦等部门进行了应用，可以支持其多项业务，效果明显。案例一：“6.04本田雅阁被盗汽车案”2014年06月03日约23时许，事主杨某某将一辆汽车停放在广东省佛山市禅城区佛平路红强街六小北门的正对面后回家后发现车辆被盗，被盗时间为2014年06月04日约10时05分许，被盗车辆为一辆黑色的雅阁牌HG7X

16、XXXX小型轿车。该案发地点周边与南海接壤，道路四通发达，被盗后该车没有任何卡口数据，通过视频进行跟踪排查，由于不能排该车被盗后可能被换牌或拆牌。故可以利用CarS系统对可能的嫌疑车辆筛查、识别与报警：通过品牌、型号、颜色、号牌是否正常、夜间遮阳板是否防下等组合条件判断。如果发现涉案车辆通过系统自动报警 。下图为经系统的自动判别筛查后发现被盗车的行动轨迹。通过初步视频跟踪，发现被盗黑色雅阁车经佛罗路往西方向行驶。案例二 “7.14本田歌诗图被盗汽车案”。2014年7月13日23时30分许，事主赖某某将车辆停放在在佛山市禅城区联星旺南东路2号对面的鱼塘边。2014年7月14日7时30分许，事主发现汽车被盗，被盗的是一辆白色的本田歌诗图牌粤EBKXXX。同样经过系统的自动判别筛查后发现被盗车的行动轨迹，发现歌斯图汽车是3时许被盗走，而且往佛罗路方向行驶，轨迹如下图。通过系统的自动判别筛查，对筛查的信息进行分析处理发现两起案件在某