构建高可用和可伸缩的视频监控系统

1、仅供个人参考For personal use only in study and research; not forcommercial use构建高可用和可伸缩的视频监控系统一、引言随着信息技术的迅猛发展、公安信息化研究和应用的不断深入，特别是平安城市建设和科技强警示范城市工作大范围的展开，城市视频监控系统的建设越来越受到重视和关注。作为城市安全防范系统中 的重要组成部分，视频监控系统在图像侦查、智能研判、电子巡逻、 可视化指挥调度等公安业务工作中都有着至关重要的应用。因此，如何构建稳定、实用、高效的视频监控系统一直是公安科研工作的重要 方向。从逻辑上讲，典型视频监控系统架构主要包含应用服务

2、器、信令 服务器、数据库服务器以及媒体服务器。典型架构按照具体功能和模 块将系统进行分解，明确了各部分的设计和部署，有利于系统的开发、 调试、故障诊断和维护。在功能方面，它满足了公安业务对视频监控 系统的需求，同时，它占用硬件资源相对独立，部署简单，能耗低。如图1所示，典型架构中的系统模块通常被部署在独立物理服务 器上，应用服务器负责进行业务逻辑处理和提供用户交互界面，信令服务器负责视频链路信令控制，数据库服务器负责保存和管理系统数 据，媒体服务器负责视频和音频媒体流的转发和存储；此外，系统可 能还包含其他服务器来完成相应的业务应用。系统通过核心交换机接 入视频监控网络，同时，前端设备如摄像机

3、和硬盘录像机等，通过该 网连接系统。同时，视频监控系统还可以与对接系统通信，为后者提 供视频服务，例如网上督查系统、警用地理信息系统等。图1典型视频监控系统架构随着基于视频的公安业务应用的日益广泛和深入， 对视频监控系 统的稳定性、可靠性以及性能提出了更高的要求。 尤其是在云服务逐 渐落地的今天，如何利用云框架和技术获得系统高可用性和动态伸缩 能力，成为了当前公安视频监控系统研究亟待解决的问题。 典型系统 架构通过系统模块化的方法最大限度地隔离故障，使得系统能可靠地 提供视频服务。但是，它仍然无法满足新需求中对于系统高可用性和 伸缩性的要求。目前，为了获得高可用性，业界多采用双机热备方式来保证

4、系统 提供不间断服务。双机热备方式部署简明，维护方便，能在一定程度 上提升系统的可用性。但是，该方式无法从根本上解决高可用性问题， 并且无法实现系统的动态伸缩特性。 同时，双机热备对于计算机硬件 资源和能源都存在较大浪费。因此，迫切需要对视频监控系统架构进行高可用性和伸缩性方面 的增强，以满足公安视频业务的新需求。二、设计目标为了满足公安视频应用新场景下对于视频监控系统提出的新需 求，高可用和可伸缩的视频监控系统需在提供正常视频业务功能的同 时，达到以下设计目标：1. 高可用性。在少数服务器宕机、响应失败或者系统维护和升级过程中不影响正常的系统服务，即在不断电情况下能提供7*24小时不间断系统

5、服务。2. 可伸缩性。在业务负载增大时，可以通过添加硬件资源或者启动新服务器的方式，无缝透明地提升系统的承载能力； 在业务负载减 小时，可以通过关闭部分服务器来节约硬件资源和能耗。在添加和削减硬件资源或者服务器时，不影响系统正常提供服务。3. 负载均衡。系统计算和存储任务应该能够被合理地分配到相关 服务器，避免形成负载不均衡的现象（某些服务器处于过载状态，而 其余服务器处于空闲状态），通过减小服务器之间的负载差，提升系 统的整体性能。三、系统设计（一）总体设计在高可用和可伸缩的视频监控系统架构中，使用存在于云环境中 的虚拟服务器集群替代原有单个物理服务器，同时，系统中加入了负载均衡模块。利用集

6、群和负载均衡技术获得高可用性和伸缩性，从而透明地为用户提供系统服务。与典型架构相比，该架构包含若干功能 模块集群。其中，由多台同构的虚拟服务器通过共享内存和会话的方 式来协同工作，并提供统一透明的系统服务。如 0所示，系统架构中 包含：应用服务器集群、信令服务器集群、数据库服务器集群、媒体 服务器集群以及其他功能集群。在系统架构中，利用负载均衡器隔离部署服务器集群的私有云环境和外部视频监控网络。系统集群和外接系统、外部视频设备之间通 过负载均衡器进行通信。对于视频监控系统外部的系统和设备，通过 负载均衡器上配置的视频监控网地址和端口通信， 即可实现透明的对 接和访问，而无需关注具体是由集群中的

7、哪台服务器提供的处理。而对于系统集群间的通信，也是通过负载均衡器来完成的。每个集群在 负载均衡器中都配置有对应的云环境内部私有地址和端口（即集群的代理地址和端口），当有请求到达时，负载均衡器会根据当前的负载 情况从目标集群中选择合适的服务器来处理。同时，负载均衡器会对每个集群内的虚拟服务器负载进行监控， 动态分析系统各部分的负载情况，并根据实时负载情况和预设规则进 行系统伸缩控制。当业务请求增大时，集群服务器负载加重，负载均 衡器会在负载达到一定阈值后调用云环境系统接口启动新的集群节 点来提供更大的系统承载能力，并在整个集群上实现负载均衡；反之, 当业务请求减少时，集群服务器负载减轻，负载均衡

8、器会根据预先设 置的规则关闭集群中的某些节点， 从而减少了虚拟机的数量，节约云 环境中的硬件资源和能源消耗。因此，与典型架构相比，该架构带来以下特性：首先，负载均衡 器和集群功能帮助系统获得了高可用性，集群中只要有一台服务器在 正常工作，该功能模块就能正常提供系统服务；并且，利用负载均衡 器实现了负载均衡的目标，即根据动态的负载情况选择集群中合适的 服务器来处理请求；再者，利用集群和负载均衡技术，可以在云环境 中实现系统的负载监控，并根据实时负载情况动态调整集群规模和承 载能力，实现系统的动态伸缩特性，满足不同应用场景下的业务需求； 此外，由于负载均衡器的隔离功能，系统只提供统一访问的外部地址

9、 和端口，而系统内部的集群对外不可见，隐藏了集群实现和访问的细 节，负载均衡器能提供对网络攻击的检测和拦截， 系统整体的安全性 得到了提升。图2总体架构（二）部署架构在实际部署和应用中，为了获得良好的可用性、伸缩性和安全性, 系统集群将部署在私有云环境中，并且利用软件中间件和负载均衡器 来分别提供集群和负载均衡功能。同时，还需使用内存共享服务器来 为集群中的节点提供共享内存的功能。如图3所示，根据总体架构设计，高可用和可伸缩的视频监控系 统部署由应用服务器集群、信令服务器集群、数据库服务器集群、媒 体服务器集群、其他功能集群、共享服务器集群以及负载均衡器组成。 由于系统中所有集群都部署在私有云

10、环境中， 集群中节点都采用独立 网段分配IP地址。每个集群都使用了若干台虚拟机作为载体，分别 运行集群软件中间件组件。负载均衡器采用旁路串联结构接入， 即从逻辑上，系统中的其他 部分都被屏蔽于负载均衡器之后。所有系统的请求和响应都必须经过 负载均衡器进行通信。同时，为了避免负载均衡器的单点故障，部署 中使用了两台负载均衡器来进行双机热备配置。 每台负载均衡器需配 置两组IP地址，一组与系统集群同网段的IP地址供集群间通信使用， 一组为外部视频监控网IP地址供外部访问使用；两台负载均衡器之 间通过专用接口线完成热备状态同步，并共享同一个外部视频监控网 IP地址。图3部署架构进行部署时，为了提高系

11、统的可用性，宜将各服务器的多个实例 部署在不同的虚拟机或者物理机上。由于系统中包含多个集群，在部 署前应进行全面规划，权衡系统可用性和计算机硬件资源，从而实现 高效合理的部署。四、关键技术（一）云环境利用云环境搭建视频监控系统，为系统的高可用性、快速部署、实时监控、动态伸缩提供底层技术支持。虚拟化技术旨在将物理上相互独立的计算机硬件资源， 整合为逻 辑上统一的整体，为上层系统应用提供服务。通过虚拟化技术整合包 括计算、存储、网络等硬件资源，提供统一透明的高可用基础设施环 境，为构建高可用和可伸缩的视频监控系统提供保障。一方面，它能 帮助系统高效利用计算机硬件资源，降低系统能耗；另一方面，虚拟

12、化技术为系统的高可用性、实时监控、动态伸缩特性提供技术支持。在视频监控系统内部，系统各个集群和服务器以虚拟机为载体执 行计算任务；当系统监控到各服务器负载达到一定阈值时， 可根据预 先设定的规则，启动新的服务器加入集群，提升集群的承载能力。反 之，当负载减小时，可关闭部分虚拟机，回收硬件资源供其他负载较大的集群使用。媒体服务器集群通过虚拟存储进行媒体数据的存储和管理，当存储容量到达一定阈值后，可通过添加存储介质的方式提升系统的存储 能力，而不会影响系统的正常使用；当存储介质中某些部分损坏时， 虚拟存储技术可将该部分数据迁移到正常设备上，实现系统存储的容 错性，保证了系统数据的完整性，透明地提供

13、存储服务。随着云技术的不断发展和成熟以及云服务在公安信息化领域逐 渐落地，利用云环境搭建稳定、高效、智能的基础设施，从而为视频 监控系统提供底层保障和技术支持。（二）集群技术中间件集群技术为视频监控系统带来了容错性和高可用性。 通过 系统服务器集群，使用同构的服务器提供系统服务，一方面提高了系 统的容错性，在单个服务器发生故障时不会影响系统的整体情况；另一方面，通过冗余方式保存关键数据，保证系统数据完整性，提高了 系统的可用性和稳定性。大多数中间件集群采用分层结构模型，该模型将整个集群划分为 两层：处理层和数据层。前者用于无状态地处理请求，后者用于保存 会话数据和状态。其中，每层中都会运行相当

14、数量的实例，处理层实 例都是独立运行提供服务，数据层的实例采用冗余方式保存系统关键 数据，实例运行于不同的物理机或者虚拟机当中，互相之间不影响。 此外，集群中与会话状态无关的数据，可使用内存服务器完成内存共如图4所示，该集群中处理层和数据层各包含两个实例，其中， 处理层的两个实例和负载均衡器连接提供服务，而不保存任何状态相 关的数据，数据层的两个实例负责保存系统状态数据。 处理层的实例 都可以从任意一个数据层的实例上获取系统状态数据，操作完成后， 所有数据层实例上的系统状态数据都将得到更新。 不同数据层实例保 存着冗余的全量系统状态数据，因此，只要有一个数据层实例存活即 可保证系统数据不会丢失

15、。并且，当其他数据层实例重新启动后，系 统数据会被自动复制到新启动的实例上。集群技术提高系统可用性的原理在于集群技术消除系统中存在的单点故障源，即每层中所有实例的服务器同时发生故障的概率要远小于单个服务器发生故障的概率图4分层结构的中间件集群模（三）负载均衡利用中间件集群技术和负载均衡技术为系统提供动态伸缩和负载均衡特性，从而保证视频监控系统的服务质量。 负载均衡技术可以实时监控集群环境中的负载情况，并根据各个服务器的负载数据和预 置规则，实现集群内的负载均衡，减小服务器之间的负载差，从而整 体提高系统的服务性能。于此同时，集群分层模型中各层的实例都是同构的服务器， 因此, 可以通过动态地开启

16、和关闭新的实例来调整系统的承载能力和服务 性能。当负载均衡器监控到集群中的负载达到一定阈值时，根据预置规则，将开启新的集群服务器来完成负载提升，保证系统性能；当监 控集群负载小于一定阈值时，为了节约硬件资源和能耗，系统将关闭 某台服务器，并回收其硬件资源，从而实现了视频监控系统的动态伸 缩特性。此外，由于分层结构的集群模型实现，处理层和数据层的实例存 在于不同的服务器上，他们之间需要使用进程间通信来完成系统状态 数据的操作，从而构成系统数据处理的主要时间消耗。因此，在集群 处理层实例中通常使用缓存技术来保留处理过的系统状态数据，当再次处理关联请求时，无需再次通过进程通信从数据层获取该数据。根

17、据这一原理，负载均衡器应根据请求之间的关联性， 智能选择合适的 实例来处理，以减少集群内部实例的通信消耗，缩短系统的响应时间， 提升用户体验。五、总结随着公安信息化工作的不断推进和深入， 基于视频的公安业务应 用也不断丰富，视频监控系统日益完善和成熟，视频服务在公安业务 中的重要性与日俱增。构建稳定、智能、高效的视频监控系统，利用 云环境实现对系统硬件资源进行整合，提高系统的高可用性、快速部署能力以及动态伸缩特性将是今后研究的重要方向。具备高可用性和伸缩性的视频监控系统必将在公安视频应用业务中发挥更大的作用。注：基金项目国家科技支撑计划（编号：2013BAK02B0）参考文献1 张本锋，陈朝武

18、，房子河.新型城市监控报警联网综合应用 集成平台J.北京：警察技术，2010年第04期.2 张本锋，王建勇，房子河.视频监控大联网、智时代的新一 代可视融合警务平台J.北京：警察技术，2013年06期.3 薛正华，杨顺程，聂磊，董小社.服务器虚拟化技术综述J.北京：计算机科学，2006年Vol.33106-110.4 OCCAS5.1Docume ntsE27705-01C on ceptsEB/OL./E27702_01/ doc.51/e27705/toc.htm5 ,2013. F5BIG-IPLocalTrafficMa nager:Co nceptsEB/OL./e n-us/products/big-ip_ltm/ma nu als/product/ltm-con cepts-11-5-1.html仅供个人用于学习、研究；不得用于商业用途。For personal use only in study and research; not for commercial use.Nur f u r den pers?nliche