2024视频AI行为分析预警技术

视频AI行为分析预警技术 2024 目录CONTENTS项目介绍PROJECTINTRODUCTION

产品介绍PRODUCTINTRODUCTION

动作介绍ACTION

服务方案SERVICEPROGRAMME项目介绍PROJECTINTRODUCTION首家独创 人工智能AI行为分析预警系统传统监控+AI=智慧监控人工智能技术解析视频中的异常行为项目介绍行为分析技术人体关键点检测AI行为分析预警系统，是一款通过摄像机拍摄回传的视频画面，自动识别分析场景下发生的异常行为并预警的智能监控系统。人体关键点检测该技术基于AI神经网络的深度学习算法，根据人的肢体运动轨迹，计算出各种异常动作行为，并及时发出预警信号。最新一代的视频分析技术，也是AI人工智能技术完美应用在安防领域的技术突破。该技术打破了传统的技术壁垒，它是把人体的主要活动骨架结构化，根据人的运动轨迹定义各种异常行为，并基于深度学习形成动作体系。该技术彻底摆脱了对场景的依赖，技术核心是分析场景下人的动作行为，只有人才会触发系统的预警，当人的动作行为达到预警规则时，则会立即发出预警信号。该技术彻底摒弃了传统的移动侦测技术，无需对图像进行一帧一帧比对，不需要各种伴线技术来限制，大大降低了传统技术的误报率，甚至很多规则都可以做到零误报。同时，该技术采用GPU图像计算，降低对硬件资源的消耗，大大提高了服务器硬件的综合识别能力。技术原理行为分析人脸识别行为分析人脸识别物体识别

通过算法，抓拍触发异常行为预警的当事人的人脸，分析识别其身份，同时定位，跟踪其行走路线、联动弹屏将其逃逸方向的其他监控画面弹出来，高效准确判断锁定位置

通过算法，分析触发异常行为报警的当事人头上戴的、身上穿的、手里拿的物体的详细特征，以及根据目标人物的高矮胖瘦、男女老少、行走姿态等特征，给他一个系统可识别的编号，结合人脸识别技术精准判断和定位目标。技术优势1误报率1AI行为识别技术很多动作都可以做到零误报。而传统的视频分析技术相对来说误报率则高很多

识别精准度2AI行为分析技术可以精准识别到场景下人的异常动作行为。而传统的视频分析技术是场景发生了各种变化后产生的报警，不能精准识别人的具体的异常行为23识别效率3AI行为分析技术采用GPU分析图像。传统的视频分析技术则大多采用CPU运算，相对来说，服务器分析效率低很多最主要的区别：AI行为分析技术可以做到一台服务器同时分析几百路视频。而传统的视频分析技术仅可以分析几十路视频，而且很吃力

识别能力4AI行为分析技术可以做到同一台摄像机，同时分析N个异常行为，当场景下N个异常行为同时发生时，都可以识别出来。而传统的视频分析技术在这方面的能力相差很远，同一台摄像机可以识别的异常行为非常有限4技术优势技术对比传统视频分析技术AI行为分析技术传统摄像机厂家大多数基于移动侦测技术，拌线技术，图像比对，学习人形或物体，轨迹分析等多种技术糅合在一起，实现对场景的分析，当场景发生变化时，从而判断为各种异常基于人体骨架结构，根据运动轨迹定义各种异常行为，无需针对场景进行分析，只要场景内的人的动作、与人相关的规则发生变化，即可分析判断出各种异常行为，主动预警产品介绍PRODUCTINTRODUCTION系统简介硬件参数机架式高性能图灵GPU定制服务器通用规格16路/32路/64路/128路

显示输出：1路HDMI信号输出上墙方式：可直显/拼控/平台控制管理方式：集中管理客户端

兼容能力支持任何第三方网络摄像机接入或模拟转数字信号的接入部署方式并接入监控局域网异常存储系统自带存储盘自动存储异常预警视频

多点预警：支持多点通过客户端管理弹屏预警对接合作：开放SDK给第三方，技术支持对接

预警方式自动弹屏及语音提示支持微信推送预警行为分析服务器基础版 旗舰版 行业定制版 政府采版动作定义肢体动作求救、打架、跌倒这类型动作偶尔出现误报，误报原因主要来自于同类型的肢体动作触发骨骼动作闯入、攀爬、警戒或动物的移动不会触发报警

时间动作肢体动作时间动作骨骼动作肢体动作时间动作骨骼动作人数动作骨架，然后系统计算时间人数动作聚众、尾随这类型动作不会误报，系统识别人的数量，视频画面中有多少副人的骨架，就统计多少人 识别规则区域规则识别规则区域规则标记规则1.设置有效区域，在有效区域中才会触发系统报警1.选择标记功能，系统在预警被触发后标记目标人物2.设置无效区域，在无效区域不会触发系统报警2.标记分为目标标记和骨架标记两种标记模式1234灵敏度规则时间规则1.灵敏度越高，识别规则1.不设时间规则，24小时检测要求越低，误报会增加2.灵敏度越低，识别规则要求越高，误报会降低

才检测预警规则弹屏预警当系统检测到异常后，会立即把现场视频画面弹屏显示到大屏幕上预警弹屏预警声音提示会通过音响播放提示音预警声音提示远程预警客户端上同步接收预警信息远程预警弹屏规则当检测到预警时，弹屏显示弹屏规则异常行为消失后，屏幕会在延时5秒后自动熄灭回复原状。主界面会显示最近6-8次的预警记录漏报规则可视距离可分为：有效可视距离和无效可视距离有效可视距离内，基本不会漏报有效可视距离外，不能保证是否漏报有效可视距离参考数据摄像机镜头4mm=8-10米摄像机镜头6mm=12-15米摄像机镜头8mm=20-25米

可视角度可视角度指能被摄像机拍摄到具体的动作行为的有效可视角度。可视角度主要考虑点包括摄像机安装高度和摄像机可视范围覆盖面摄像机高度摄像机安装高度建议为2.5-3米，支持全景摄像机模式角度分析摄像机覆盖面一般情况下是指全方位双向无死角覆盖设计，头尾两支摄像机形成对射效果更加 取流方式视频流 存储服务器 视频流 综合平台 流媒体服务器 门户平台 人脸分析 【取流说明】本系统支持前端NVR

行为分析 客户端管理服务器客户端服务器客户端【功能】安装在监控中心或管理中心，负责设置各行为分析服务器的参数规则等【配置】专业服务器或高配电脑系统对接IPC对接任何第三方品牌的网络摄像机，都可以接入AI行为分析预警系统进行视频分析，对摄像机硬件有一定的要求对接内容：主码流地址、子码流地址、抓拍地址、端口号、压缩编码类型、摄像机账号、密码平台对接平台对接主要包括平台取流和平台展示两种对接平台取流：提供第三方平台的SDK，取RTSP流进行对接平台展示：提供SDK开发文档及开放接口，由平台商做二次开发展示内容：把分析出来的异常信息统一由平台实现弹屏、预警、管理、统计等系统联动广播系统联动启动广播系统自动语音警示红外系统联动显示报警对应区域的监控画面例如：周界围墙报警联动

消防系统联动行为分析监控当消防报警被触发时，立即弹行为分析监控例如：火焰检测、烟雾检测等开关量信号联动可以实现系统联动例如：喧哗检测【备注】本功能需进行二次开发，由第三方平台服务商开发对接系统界面

界面简介管理软件登录按钮系统拓扑图行为分析服务器平台管理服务器流媒体服务器存储服务器 人脸服务器 行为分析服务器平台管理服务器流媒体服务器存储服务器管理客户端 监控局域网管理客户端

值班岗客户端其它区域其它区域摄像机摄像机摄像机室外公共区域摄像机摄像机摄像机摄像机室外公共区域摄像机摄像机摄像机室内办公区域

摄像机

摄像机动作介绍ACTIONINTRODUCED行为动作欢迎定制开发公共区域欢迎定制开发打架、跌倒、聚众、求救周界区域攀爬、闯入、警戒值班区域离岗、睡岗、缺岗其他区域徘徊、滞留行为分析算法公共区域☞打架斗殴

动作定义两人或多人互掐、扭打、推搡等定义为打架应用场景室内外公共区域、其他人员聚集的场景等设置规则该动作无需设置区域和事件，全范围全程实时检测，仅需要对灵敏度进行调整。低灵敏度误报较小，高灵敏度误报较多动作特性打架属于肢体动作，没有任何动作标准。目前系统仅支持互掐、扭打、拳打脚踢等类型的算法识别，其他打架行为可能识别不了。真实打架场景，往往伴随有跌倒、求救、聚众等状况，因此在设置打架规则时，建议同时设置这几个动作规则识别速度自动作发生到系统分析，3秒内可发出预警打架斗殴行为分析公共区域☞不慎倒地动作定义人的头、屁股、脚处于同一平面平行于地面时定义为跌倒应用场景室内外公共区域、其他人员聚集的场景等设置规则该动作无需设置区域和事件，全范围全程实时检测，仅需要对灵敏度进行调整，低灵敏度误报较小，高灵敏度误报较多动作特性跌倒属肢体动作，可能会误报。有人跌倒时，如果能爬起来，则没有问题；如果不能起来，则有可能发生意外，需前往查看。对半蹲、坐地、跪地、半躺、全躺、全趴下等行为也做了识别识别速度自动作发生到系统分析，3秒内可发出预警不慎倒地行为分析公共区域☞聚众围观

动作定义聚集人数超过系统设定的数量，则定义为聚众围观应用场景室内外公共区域、其他人员聚集的场景等设置规则系统可设置3/6/10/20/50人等多种人数选项，可设定区域及时间段。聚众的应用场景，属于公共区域，正常活动时间段和人数较多的区域，不适宜设置聚众规则动作特性属骨架人数分析，该动作几乎没有误报。镜面中的人物、人的影子、人形模特、屏幕里的人出现在区域内也会计算人数识别速度自动作发生到系统分析，3秒内可发出预警聚众围观行为分析公共区域☞紧急求救动作定义在遇到危险时，举起双手，超过肩膀，定义为紧急求教应用场景任意场景设置规则该动作无需设置区域和事件，全范围全程实时检测，仅需要对灵敏度进行调整，低灵敏度误报较小，高灵敏度误报较多动作特性求救属肢体动作，可能会误报（如伸懒腰、举双手欢呼等）。真正遇到危险时，可能伴随有跌倒、打架、聚众等状况，因此在设置求救规则时，建议同时设置这几个动作规则识别速度自动作发生到系统分析，3秒内可发出预警紧急求救行为分析公共区域☞危险攀高动作定义在设定区域内发现有人攀高，系统会立即预警应用场景攀高可用于周界围墙、建筑物外墙设置规则必须设置攀高警戒区域，才能达到触发预警目的。一般采用默认灵敏度，不同场景可适当调整灵敏度动作特性属骨骼动作，一般情况下，不会误报识别速度自动作发生到系统分析，3秒内可发出预警危险攀高行为分析公共区域☞异常徘徊

动作定义有人在特定区域内来回走动、逗留超过系统设定的时间应用场景特殊场景，或特定时间段内的公共区域场景设置规则系统提供1分钟、3分钟、5分钟、10分钟四种规则选项，可以设定布防时间段和设定区域动作特性属骨骼与时间相结合的动作，不会误报。系统检测到人的骨架出现在设定的区域内，系统开始计算时间，持续出现超过系统设置的时间上限时，立即报警识别速度自徘徊规则启动后，在系统设定的预警时间内仍然未离开的，则立即预警异常徘徊行为分析公共区域☞超时滞留

动作定义有人在特定区域内滞留，超过系统设定的时间即属超时滞留应用场景特殊场景，或特定时间段内的公共区域场景设置规则系统提供1分钟、5分钟、10分钟、30分钟四种规则选项，可以设定布防时间段和设定区域动作特性滞留和徘徊的规则是一样的，只是系统计时的标准更长。徘徊和滞留应用在其他行业，需要识别是否同属一人，可在v2.0版本中增加人脸识别技术，滞留和徘徊功能更完善识别速度自滞留规则启动后，在系统设定的预警时间内仍然未离开的，则立即预警超时滞留行为分析公共区域☞高空攀爬动作定义双脚离开地面并往上爬，则定义为高空攀爬应用场景周界围墙、建筑物外墙设置规则在围墙大约1米高的位置，一直到围墙顶部，包括围墙里外两侧，都设置成警戒区域，建筑物外墙也这样设置动作特性属骨架和人体姿态特征的组合，一般不会误报识别速度自动作发生到系统分析，3秒内可发出预警高空攀爬行为分析公共区域☞非法闯入动作定义当有人闯入特定区域时，则定义为非法闯入应用场景任何有限制人闯入的场景，或者周界围墙警戒区域，室内警戒区域等设置规则设定有效区域和布防时间段，检测到有人闯入即报警动作特性属骨骼动作，应用广泛，一般不会误报。不会因任何物体移动或场景、环境、光线等发生变化而导致误报，比传统监控技术更有优势识别速度自动作发生到系统分析，3秒内可发出预警非法闯入行为分析公共区域☞值班离岗动作定义值班人员离开岗位超过设定时间，则定义为值班离岗应用场景值岗岗位规则设置在值班岗位设置有效区域。系统提供1分钟、5分钟、15分钟、30分钟四个时间选项，1分钟为检测时间，另外三个时间选项为常规需求动作特性属骨骼与时间相结合的动作，不会误报。在有效区域内检测不到人，开始计时，达到系统设定的时间立即预警识别速度值班人员离开岗位超过系统设定时间，立即预警值班离岗行为分析公共区域☞值班睡岗动作定义值班人员在岗睡觉，超过设定的时间，为值班睡岗应用场景值班岗位设置规则在值班岗位设置有效区域。系统提供1分钟、5分钟、15分钟、30分钟四个时间选项，1分钟为检测时间，另外三个时间选项为常规需求动作特性与离岗同属骨骼与时间相结合的动作，不会误报识别速度值班人员一直未活动超过系统设定时间，立即预警值班睡岗行为分析公共区域☞值班缺岗动作定义值班岗位长时间没有人上岗值班，定义为值班缺岗应用场景值班岗位设置规则在值班岗位设置有效区域。系统提供了60分钟、120分钟、180分钟、240分钟四个时间选项动作特性与离岗同属骨骼与时间相结合的动作，不会误报识别速度值班人员自离开开始，达到系统设定时间则立即预警值班缺岗行为分析摄像机状态检测（旗舰版功能）监控摄像机状态检测功能用途监控摄像机状态侦测：正常，异常，离线（被遮挡，被关电源，被剪断线路）不需手动输入。监控摄像机状态和异常行为动作库菜单可以随意切换。人脸识别（旗舰版功能）人脸识别功能定制（在同一台行为分析服务器上实现人脸识别功能）别身份。的，则分析其人脸属性，如性别、年龄等特征。有近距离才能识别出人脸。火焰报警检测消防事件消防事件需配火焰识别摄像头，火焰识别监控系列摄像机是集火焰探测和视频监控一体的科技产品，采用了先进的光谱分析处理技术，确保了在复杂环境下精准识别火焰。在局域网中，火焰识别系列摄像机视频画面及火情，实时显示在监控室，现场发现火情监控室同时收到警情通知，能够在萌芽时消灭火势。摄像头安装的现场有喇叭报警，指挥中心行为服务器做出弹屏语音报警，值班人员及时做出紧急预案处理，降低损失。系统组成：火焰识别球机、枪机，警灯。系统功能：检测到火情时，摄像机本地提供DC12V或常开报警信号输出，行为分析服务器视频弹屏并伴有报警语音。应用场景：化工厂、仓库、电动车停车棚、消防系统接入、动环系统接入、木料加工、喷涂车间、配电室、林场、加油站等易燃或重点防火场所，也可以用禁烟场所打火机打火报警。快速奔跑检测(特殊行业定制开发功能）动作定义指定区域，突然出现有人加速奔跑前进，立即弹屏预警。应用场景任何有限制人奔跑的场景，或者警戒区域，室内外警戒区域等设置规则设定有效区域和布防时间段，检测到有人奔跑即报警动作特性属骨骼动作，应用广泛，不会因任何物体移动或场景、环境、光线等发生变化而导致误报，比传统监控技术更有优势识别速度自动作发生到系统分析，3秒内可发