智慧司法-司法重点场所及人员视频监控智能分析系统建设方案2023

智慧司法司法重点场所及人员视频监控智能分析系统建设方案XXX科技有限公司2023年XX月XX日目录一系统概述 41.1数据流定义 41.2已建视频图像接入 4二系统总体架构 5三系统功能 63.1消失出现识别 63.2异常奔跑识别 63.3滞留徘徊识别 63.4人员聚集识别 63.5摔倒识别 73.6攀高识别 73.7离岗监测 73.8打架斗殴监测 73.9智能跟踪 73.10值班人员行为行为识别 83.11脱岗监测 83.12休息监测 83.13行为记录 83.14车辆识别 93.15车辆监控 93.16遗失物品识别 93.17物品丢失识别 93.18区域入侵监测 93.19围墙翻越监测 103.20烟火监测 103.21视频质量针对预警 103.22电子地图预警 113.23数据库管理 123.24视频检索 123.25报警设置 143.26统计报表展示 163.27平台级联 163.28对接扩展 163.29系统控制 16四结论 17系统概述智能分析系统需要采用最先进的背景建模、行为模式识别算法和人工智能算法等多领域的技术，对视频输入进行一系列处理，从视频流中提取监控场景中的运动目标信息如目标位置及尺寸、运动轨迹、目标类型等；用户在客户端设置报警规则，事件检测模块判断是否有规定事件发生，若有事件发生则产生报警信号；当有报警发生时，报警处理模块抓拍当前视频的无损图像，并且更新索引文件，无损图像及索引文件被发送到客户端，同时将无损报警图像保存。数据流定义前端各类监控摄像头的视频监控图像数据通过网络传输到核心交换机，视频资源由流媒体服务器分拨进行存储，同时通过视频智能分析服务器对视频资源进行分析处理，得出人员信息、车辆信息、物品信息、行为信息等信息，支撑上层相关应用服务，并将相关分析处理结果反馈到用户，实现视频资源智能分析的过程。已建视频图像接入（1）视频图像格式已建视频图像格式应符合以下要求：a)包括但不限于D1（720×576）、720P（1280×720）、1080P（1920×1080）和4K(4096×2016)等分辨率的视频图像；b)网络视频流封装格式符合GB/T28181-2016的相关要求；c)采用H.265、H.264和MPEG-4等视频编码格式；d)采用JPEG、JPEG2000、BMP和PNG等格式的图像。（2）接入方式接入方式应符合以下要求：a)从视频监控联网/共享平台获取实时视频符合GB/T28181-2016中的相关要求；b)支持从前端系统获取视频图像。5.3.2.4 视频采集设备管理系统应对摄像机提供以下管理功能：a)支持对摄像机的添加、删除和修改等维护操作；b)支持批量添加和删除摄像机设备；c)新摄像机上线可通过按键刷新在设备树列表中显示；d)摄像机数量可扩展，不受监控点数目的限制。系统总体架构本系统总共分为六大功能模块，根据检测的对象及内容划分为重点人员智能监控、办公人员智能监控、车/物智能监控、区域智能监控、智能化视频管理及系统管理。重点人员智能监控主要对XX中心等司法场所范围内的重点人员行为进行监控，智能分析，实现提高监控质量，共有9个功能模块；办公人员智能监控主要对场所内的工作人员进行必要的工作监督，增强管控力度，共有4个功能模块；车、物智能监控主要对视频监控区域内的车辆、物品进行智能监控，共计4个功能模块；区域智能监控主要对特定区域进行重点监控，共有3个功能模块；智能化视频管理主要是提供智能化的视频资源索引、调用及监控质量的智能化监测，共计4个功能模块；系统管理主要是提供在线设置、统计报表、及接口等功能，便于管理人员对系统进行管理，设置和后续升级改造，共计5个功能模块。系统功能消失出现识别在公共法律服务中心、XX中心等的一些区域比如操场，指当有人、车辆或者物体出现在画面中的设定的某个区域中，被认定为出现行为发生。消失识别是针对出现识别而言的，当人、车辆或者物体突然从某个特定区域消失，即可产生消失识别。消失识别强调的是物体从特定区域中突然消失了，而离开识别强调的是物体从区域中离开的动作。当出现异常行为，智能视频分析系统就发出报警通知值班干警。异常奔跑识别在XX中心的通道或者其他关键场所检测是否有人员快速运动，产生一个异常奔跑设别，当出现异常行为，智能视频分析系统就发出报警通知值班干警干预，有效防止追逐打架等突发事件。滞留徘徊识别对于XX中心等内部一些指定区域或者外围等其他地方，检测是否有可疑人、物体或车辆在指定的区域内长时间停留，当滞留或者徘徊时间超过预设值，系统将发出报警。智能分析系统则会对该类行为进行分析，产生报警，监控中心当即可以联系现场人员进行甄别处置，防止有人勘察XX中心等的建筑结构等信息。人员聚集识别在公共法律服务中心、XX中心内的摄像机监视的视场景范围内，通过系统对警戒区域人员密度进行计算，动态输出人员数，超过一定域值时触发提示或报警。应用于XX中心等敏感区域、群体事件多发区域，第一时间处理警情，避免事态扩大。摔倒识别XX重点人员在进行生产活动的时候，如果出现人员突然摔倒现象时，智能分析系统可以产生一个人员摔倒的报警信息通知值班人员，监控中心当即通过现场视频判断发生的事件，可以联系现场人员进行识别、处置。攀高识别当XX重点人员在监室攀高，越过警戒线时，智能分析系统产生报警通知值班干警，于此同时报警视频画面自动弹出进行甄别处置，将可能出现的异常情况消灭在萌芽状态，确保司法场所安全、XX重点人员安全。离岗监测在XX重点人员进行生产活动的时候，如果出现长时间不在其岗位或长时间出于休息状态，将会及时将信息反馈到值班人员，值班人员通过监控视频及时查看现场情况，并联系现场人员进行甄别，处置。打架斗殴监测XX中心等生产生活场所出现打架斗殴情况，将产生一个打架斗殴识别事件，智能分析系统则会对该类行为进行分析产生报警。当出现异常行为，智能视频分析系统就发出报警通知值班干警及时处理问题防止事态进一步扩大化，有效加强管理。智能跟踪在XX中心等生产生活场所，当主摄像机检测到有可疑情况发生的时候，如XX重点人员跨越警戒线，进入离开警戒区域，徘徊等，主摄像机发送指令控制从摄像机进行云台旋转和镜头缩放，锁定触发报警的目标并对其进行自动跟踪，使目标待续放大以显示在画面中央，这样监控中心可以看到更清晰的目标特征，以利于实时的判断和事后对照取证。值班人员行为行为识别对XX场所等场所的值班人员行为进行识别、判断正常状态：值班人员在工作区域内执勤，姿势正确且在规定的区域内活动，属于正常状态，不会触发报警。倒地报警：值班人员在工作区域内执勤，过程中值班人员可能因中暑或远距离遇袭出现倒地的情况，系统识别为岗位异常报警。脱岗报警：值班人员在工作区域内执勤，过程中值班人员脱离岗位，系统识别为岗位异常报警。换岗报警：当值班人员换岗时，未按照规定区域或者规定动作、规定时间换岗，系统自动识别告警。脱岗监测当XX场所等司法重点场所的值班人员离开指定的区域，不在指定的区域内值守时智能分析系统产生报警通知值班干警，于此同时报警视频画面自动弹出进行甄别处置。同时可对值班室内人员数最进行检测，超过限定人数时，系统自动报警。休息监测当XX场所等司法重点场所的值班人员趴下（睡觉）超过设定值时，系统产生报警通知值班干警，于此同时报警视频画面自动弹出进行甄别处置。同时可对值班室内人员数最进行检测，超过限定人数时，系统自动报警。行为记录当XX场所等司法重点场所的值班人员出现违规操作，或出现脱岗，超时休息的状况时，系统自动对值班人员该阶段所有行为进行记录存储，并进行系统自动反馈，以便管理人员对值班人员工作状态进行判断，同时避免意外状况发生。车辆识别对XX场所等司法重点区域的车辆进出情况进行严格把控，做好记录。通过车辆识别技术，采用车牌检测算法、车牌跟踪算法、车型辨别算法、车身颜色识别算法及车牌识别算法等实现对画面中车牌、车型及车身颜色进行识别，记录；并根据双线圈的模式对车辆的运动轨迹判断出车辆的出入关系，再计算出任意时间段内进入车辆数量和离开车辆数量。车辆监控对进入社区XX中心等区域的监区的车辆进行定位跟踪，根据其运动轨迹，判断车辆是否按要求到达指定区域停放，是否逆行。提高车辆管理管控能力。遗失物品识别在XX中心等一些重要生产生活场所，当画面中某人遗弃某物体或者从某车上丢下物体，都会产生弃置识别事件。监控人员第一时间发现不明包裹被遗弃，防止犯人通过一些不正当的手段传递违禁物品。物品丢失识别在XX中心等一些重要生产生活场所，当视频画面中的某个物体被取走，即可产生取走识别事件。该物体应该存在，但是却被人偷走，智能化分析系统能够及时捕获这样的异常行为，智能视频分析系统就发出报警通知值班干警。特别有利于针对XX重点人员私藏、偷盗一些工具进行危害活动。区域入侵监测智能监控系统自动检测场景内人、车辆非法进入重要敏感区域。如果有人跨越警戒线或进入了预先设定的禁止区域等异常悄祝发生，智能分析系统将锁定框标识别目标在画面中的具体位置，开始进行物体运动轨迹追踪，并启动预先设定的报警机制自动调用实际场景中声光报替装置，对可疑人员发出告警，同时提醒值班人员注意，及时制止，这样就能实现无间断的自动值守，避免人工值守的传统方式因疲劳或疏忽而错失及时发现并制止安全事件的时机。围墙翻越监测通过系统设定XX中心围墙的警戒围墙区域，一旦有可疑人员靠近或攀越围墙行为时，智能分析系统将锁定框标识别目标在画面中的具体位置，开始进行物体追踪，并自动调用实际场景中声光报警装置，对可疑人员发出告警，同时声音提醒值班人员注意，及时制止。烟火监测在摄像机监视的视场景范围内，通过系统可以任意设置警戒区域，当有火焰或烟雾出现并达到域值上限时，触发提示或报警。完全基于智能视频分析检测火焰，作用距离远、检测结果不受环境温度影响，对重点区域的烟火检测，能在第一时间提示或避免事态扩大。视频质量针对预警针对XX中心、公共法律服务中心等安装的大量的摄像机，利用视频质量诊断技术来检测监控系统中存在的各种视频常见故障，对于因使用过程中出现的故障（雪花、滚屏、模糊、偏色、画面冻结、增益失衡和云台失控等）进行视频质量诊断，有效预防因硬件导致的图像质量问题及所带来的不必要的损失，为视频监控的待续和有效监控提供坚实的基础。同时，由非自然因素造成的视频图像异常，系统同样具备强大的保护功能。遇到因为人或极其恶劣的天气对视频设备或线路造成致命损坏时，如视频图像出现剧烈抖动、无视频信号等异常状况时，系统会启动自保护预报警机制，提示中心管理人员对监控摄像机进行检修处理，打造一个万无一失的视频监控体系。其主要监控的内容有：一、信号丢失诊断由于前端设备损坏或者传输环节故障引起的信号丢失现象，包括单色画面，叠加OSD画面等人造画面。二、图像模糊诊断由于聚焦不当、镜头灰尘、镜头涂抹、镜头有雾、异物遮挡等导致的图像画面不清晰。三、亮度异常诊断由于摄像机增益异常、曝光不当、光照条件异常等各种原因引起画面过亮、过暗、闪烁等故障。四、图像偏色诊断由于视频线路接触不良、信号干扰等原因造成的视频画面发生色偏，甚至某种颜色缺失。五、视频雪花诊断由于视频传感器出现问题等因素引起的雪花点干扰。六、条纹干扰诊断由于收到干扰后引起的视频图像出现移动条纹、脉冲强烈条纹和叠加性条纹。七、画面冻结诊断由于传输系统故障导致的画面冻结的故障，一般表现为画面静止不动，包括时标OSD部分不动。八、对比度低诊断由于各种原因引起的对比度异常。九、场景突变诊断由于镜头遮挡引起的场景突变。电子地图预警监控中心，电视墙上用电子地图显示各个分控点，当某分控点发生报警时，系统遵循预设机制，可将报警发生的位置显示在监控指挥中心的电子地图上，不断闪烁，并将报警画面切换到大屏幕上，直到报警处理完毕才会停止。此功能目的在于要有效避免指挥中心在处理报警的时候所造成的混乱，做到有的放矢，提高处置效率和响应速度。迅速高效地指挥处置，第一时间将可能的情况进行抑制。数据库管理集中管理软件依托于数据库软件，数据库软件是一个实际可运行的存储、维护和应用系统提供数据的软件系统，是存储介质、处理对象和管理系统的集合体。数据库软件DB具有存储、截取、安全保障、备份的功能，是系统资源数据的管理工具。数据库能够保证系统资源的数据独立、高度共享、使用方便、运行可靠、可修改性和可扩充性以及能充分描述数据间的内在联系。系统资源在DB中的访问过程，都是在DBMS(DatabaseManagementSystem，数据库管理系统)的指挥和调度下进行的，并严格按照安全策略（包括系统安全策略、数据库安全策略、用户安全策略）对数据库执行相应的操作。视频检索视频检索技术是一种集视频录像分析、管理和应用的智能化检索应用技术，可采用集群化计算方式，提供几十上百倍实时以上的快速分析能力，并可根据应用需要进行线性扩展，提高计算能力。视频检索技术具有目标行为分析、人脸检测识别、车辆信息识别及视频编辑等功能。一、 目标行为分析 目标图例查看通过自动化的智能分析预处理，将杂乱无章、毫无逻辑的监控视频内容进行梳理，自动获取视频内部的事件及目标的关键信息，并根据这些信息生成视频内容及索引。干警查看这些视频索引，就如同看一本书的概述及目录一样，既可以快速的了解视频的内容，也可以快速定位到视频中所需要重点关注的片段。 目标视频段点播下载在审看视频中，干警通过对案情的分析，根据所有关注目标的一些特征，通过设置智能排查规则的方式，即可快速定位到所关注的目标及视频片段上，并达到秒级响应，而不用再需要花费大量的时间重新分析整个视频，可以把时间和精力放到有价值的视频内容审看上。 智能浓缩播放基于智能分析技术的新型视频播放方式，它能根据干警的意愿自动控制播放速度，将涉案视频中真正有用的证据、线索内容进行慢速的播放，干警不关注的内容采用快进播放的方式进行浏览。这种方式极大节约了审看干警的浏览时间，加快了视频内容的审看速度。 目标类型过滤系统可以对目标图例或排查结果的类型进行过滤，在目标结果较多的情况下，系统支持将目标中的类型进行分离，进一步缩小关注范围，比如人、颜色等。二、 人脸检索 人脸索引通过智能分析预处理以及人脸检测算法，将监控视频中的人脸进行整理汇总，获取视频内感兴趣目标的相关信息，并根据这些人脸信息生成索引。干警可以通过查看人脸图示，就可在几分钟内，查看数个小时视频中包含的所有目标，并确定嫌疑目标，也可观看该目标在整个视频中的存在片段与运动轨迹。 监管对象人脸检索在系统中输入待查询的监管对象人脸照片，选择需要检索的人脸后进行相似度等参数设置后开始检索，最后检索出的相似人脸的结果会在界面上显示出来。 图片人脸检索在外部获取非常有价值的包含嫌疑人脸的图片，想在很多大量的视频源中查找出这个嫌疑人其他信息，这时候用户可以将图片导入系统中，系统会自动检出这张图片中所有人的头像，用户可以按相似度进行排列，选取相关检出片段进行再次分析，获取有效信息。三、 车辆检索 目标查看通过自动化的智能分析预处理以及规则下的智能排查，将监控视频中的内容进行整理汇总，获取视频内感兴趣目标的相关信息，并根据这些信息生成索引，主要是以车牌信息呈现。监所干警可以通过查看车牌图例，就可在几分钟内查找到目标车牌，并可观看该目标在整个视频中的存在片段。 目标视频段点播干警可以选择需要播放的视频，此视频中包含干警关注的真正有用的车辆信息（车牌）。干警可以根据关注的内容进行慢速的播放，不关注的内容采用快进播放的方式进行播放。 原始视频图像查看系统对目标图例或排查结果的类型过滤，将车牌信息列出，干警可以自行选择关注的车牌图片，观看大图，这样就可以获取车牌对应的车辆信息。 视频片段导出系统将视频分析处理之后，显示出车牌信息，干警在诸多图片中找出重点关注的车牌，可以将此车牌相关的视频片段导出，以作为重点依据。四、 视频编辑干警可以直接在视频上进行编辑，并能实现诸多的处理效果，例如图片、图形、文本等信息的叠加。这种处理方式更加有效的让审阅干警定位和重点关注嫌疑目标，分析编辑过的视频更加具针对性。 叠加目标框 叠加文字信息 播放软件播放编辑视频仍有编辑效果报警设置（1）系统应具备以下视频图像分析报警功能：a)报警发生时通过声音、灯光和文字等报警提醒，并在GIS图层或弹窗中显示报警类型、报警位置和报警关联摄像机视频；b)支持设置异常事件侦测区域，可设置为封闭正方形、长方形、三角形和多边形等区域，封闭多边形最多边数≥16个，也可设置为一条具有方向的布控线；c)支持不同用户按需可视化设置布防规则，包括异常事件侦测报警种类、位置、报警阈值、布防启动时间和撤防时间，并可按小时、日、周和月设定重复周期；d)支持设置报警事件优先级，并按优先级别输出不同的报警方式；e)支持分多级别的报警处理，根据报警的级别不同所采用的处理方式与通知的对象也有所不同，用户可根据报警的类型将报警分成不同的级别；f)高级别报警信息经现场警察或者值班人员确认后可通过短信模块将报警文字信息和图片发送到指定的人员手机；g)区域报警等级与规则报警等级可设置组合规则，指挥中心按照优先等级处置报警信息；h)支持物防联动，将报警信息推送至安防集成平台，用作报警联动，如与门禁、灯光和警笛等联动报警；i)支持自动记录报警时间及报警事件，抓取报警时刻图像以及报警前后设定时间段内的视频片段；j)支持异常