警用云盘解决方案201506231555

项目简介项目名称建设单位和负责人项目建设单位：深圳市公安局项目责任人：XXX项目建议书编制依据无。项目性质本项目属于新建。项目概况本项目主要解决用户对文档、音频、视频等文件的存储、共享等问题，系统主要包括网盘系统、文件系统、文件管理系统和杀毒服务等子系统。系统采用分布式集群部署方式，实现了系统的高效性、安全性和易用性。有利于促进警务节约行政成本，提高警务效率。警务云盘服务系统使传统的部门组织朝着网络组织方向发展，打破了层级、部门间的限制，促使警务组织和职能进行整合，使警务的程序和办事流程更加简明、畅通；警务云盘服务系统节约了人力、物力和财力资源，提高了警务的办事效率。项目建设必要性随着信息化的快速发展，警务工作信息化的建设，会产生越来越多的文件，这些文件如果存放不够规范，就会导致查找起来非常困难更有文件丢失的情况。并且由于文件的存放比较分散，各局之间、各人员之间的文件相互传输也比较麻烦，耗时耗力，而且文件没有得到充分利用，或者造成文件重复存放、损坏等现象。这些直接会导致工作效率的低下，如果重要文件丢失或者损坏，甚至会造成工作上的重大失误，这对警务工作者来说，是非常严重的问题。对此，根据相关文件指示，利用互联网技术，特别是大数据、云计算等技术的高速发展，科学建设公安工作信息化，使警务工作能上升到一个新的台阶。本项目建设根据相关技术要求和架构，结合最新云技术、大数据技术建设而成。解决了在警务工作中对文件的存储、共享等问题，保证了文件的可利用性和安全性，提供了文件管理平台，方便了工作人员对文件的管理，提高了工作效率。通过更有效的文件存储和共享方式，结合公安云平台应用，建设警务云盘系统，对信息化建设将由深远的影响。现状及需求分析云盘服务系统需求分用户类型本系统主要面向网盘用户、系统管理员以及网盘管理员三类用户。警务云盘系统用户序号主要系统用户1网盘服务系统网盘用户2文件服务系统系统管理员/网盘管理员3文件服务管理系统系统管理员现状分析随着高科技术的迅猛发展，全面移动办公自动化。目前，在其日常业务运作过程中通常会产生大量的以电子文档形式存在的非结构化数据如办公文档、电子邮件、文本文档、表格文档、幻灯片、CAD文档、网页文档、图片、视频、音频等一系列电子文档数据。并随着业务不断的运行，这些文档会持续不停的增长。据IDC调查研究表明，目前企业政府数据的年增长速度为70%以上，其中约80%的数据是非结构化数据，虽然这些非结构化数据是警务系统中重要的无形资产，但是这些数据大部分是无法有效掌控的。警务工作中，长期的信息化办公，形成大量文档，这些文档在使用过程中主要存在以下难点：文件存储问题文件存储过于分散，各局警种之间的系统文件分散存储，而且容易丢失，相互之间关联较少，存放内容没有分类造成诸多问题。文件分享问题警务人员文件分享麻烦，要么使用传统的U盘，或者利用通讯工具传输，效率低下。而且分享也只能一对一，不能一次性分享，多人可见，这在时间上也造成了资源上的浪费。文件查找问题自动化办公，形成了大量的文件，由于文件格式多，文件量大，文件存储分散，没有分类等问题，造成文件查找困难。文件容易丢失不当的存储方式，也容易造成文件的重复存储和文件的丢失。文件易感染病毒传统文件传输过程，容易造成文件感染病毒，容易导致重大工作过失。业务需求网盘服务系统用户可以选择普通文件上传的方式上传文件；系统支持文件断点上传，当用户由于网络、系统故障、页面跳转等原因中断文件上传后，再次上传同一文件时，自动从断点处继续上传；网盘提供文件下载功能，支持断点下载，支持单个文件下载流量控制以及下载连接数控制；支持网盘用户对文件的重命名、删除、更新文件、移动等操作；网盘提供创建目录功能，网盘用户可以在指定的目录下创建新目录，目录最大层级可配置；网盘提供文件检索功能，网盘用户检索可以自己上传的文件（支持全文检索）、发出共享的文件以及接受共享的文件；网盘提供文件或目录共享功能，可共享给多个人。文件服务系统应用系统可以将文件上传到文件服务系统保存，文件服务系统返回逻辑文件ID，用户可以根据此文件ID获取文件的元数据信息、下载文件等操作；文件服务系统提供创建逻辑目录功能；文件上传者可以将资源权限分配给给其他用户。说明：资源包括目录和文件。权限级别包括只读、可写、可操作；文件服务系统支持按文件路径和文件流的形式对文件进行病毒扫描。文件服务管理系统文件服务管理系统提供文件服务管理功能，包括系统管理、监控管理、文件定时扫描、临时文件定时清理等服务。管理员的身份由统一用户管理平台分配系统管理员可以将指定的应用系统注册为一个应用系统用户，管理系统会分配对应的系统ID以及存储空间；文件服务管理系统支持对文件存储系统容量进行监控，提供容量报警和空间使用报表，报警阈值可配置,告警级别分为：正常、一般紧急、非常紧急；病毒文件存放在隔离区，文件服务管理系统支持对病毒文件进行管理操作，管理员可以删除未被业务系统引用的隔离文件；文件服务管理系统支持定时清理未上传完文件；文件服务管理系统支持对已经上传的文件进行后台定期扫描病毒，并可以根据时间区间范围等条件自定义文件扫描范围；统管理员可以将指定的深交所认证用户注册为一个网盘用户，注册页面可录入用户名、用户账号、空间限额（M）、流量限额（kb/s）、描述等信息。杀毒服务针对主流的杀毒引擎（赛门铁克、麦咖啡、卡巴斯基）进行POC选型业务流程警务云盘分为用户对文件的上传、下载、共享和搜索操作，分别对应如下。文件的上传（包括断点续传）上传文件功能，支持断点续传，分片文件上传，暂停/开始单个文件上传，并且上传进度条。流程图如下：

文件的下载（包括断点下载）网盘提供文件下载功能，支持断点下载，支持单个文件下载流量控制以及下载连接数控制。流程图如下：

文件的共享网盘提供文件或目录共享功能，可共享给多个人。或者取消已经共享的文件或者目录。流程图如下：

文件的检索网盘提供文件检索功能，网盘用户检索可以自己上传的文件（支持全文检索）、发出共享的文件以及接受共享的文件。本期建设目标与任务本期建设目标本期建设目标，包括实现需要网盘系统、文件系统、文件管理系统和杀毒服务。保障基本功能的实现和正常使用。本期建设内容系统建设内容表一、云盘系统网盘服务系统文件服务系统文件服务管理系统杀毒服务本期建设方案总体方案系统组成本系统为警务云盘系统，主要作用是提供基础文件服务。系统设计采用分布式架构，为警务人员提供统一的文件服务，其系统组成如下图所示：“警务云盘”系统组成图系统架构设计本系统主要包括基础服务以及基础应用两部分功能，根据对文件服务功能的分析，基础服务包含文件服务、病毒扫描、搜索服务等功能模块。基础应用包含网盘服务系统和文件服务管理系统。基础服务：文件服务：依赖分布式文件存储服务进行文件的上传下载，为应用系统提供文件相关服务。病毒扫描：依赖病毒扫描服务，为应用系统提供文件病毒扫描服务。搜索服务：为应用系统提供全文搜索服务。基础应用：网盘服务系统：为深交所授权的网盘用户提供网盘服务，依赖基础服务以及SSO认证服务。文件服务管理系统：文件服务的文件服务管理系统，系统管理员可以管理所有使用文件服务的应用系统，网盘管理员可以管理所有网盘用户，依赖基础服务以及SSO认证服务。警务云盘系统架构网络架构设计警务云盘系统平台通过服务网络架构如下：网络架构设计

系统部署针对本项目业务需求，在数据中心部署云盘服务器，包括网盘系统服务器、文件系统服务器、文件管理系统服务器、和杀毒系统服务器。用户在网络通过用户终端连接到服务器，即可使用云盘服务系统。如下图所示：警务云盘系统警务云盘系统设计网盘服务系统网盘服务系统建设内容网盘服务器系统内容包括文件上传、断点续传、文件下载、文件管理、目录管理、文档检索、文件共享等功能。网盘服务系统方案设计网盘服务系统为认证用户提供个人网盘服务，包括文件上传、文件下载、文件共享、文件管理、目录管理、文档检索等功能。系统组成图如下：网盘服务系统组成图网盘服务系统架构网盘服务系统平台包括数据层、服务层、应用层和用户层，平台主要作用是针对文件在网盘的操作和管理。架构图如下：网盘系统架构图网盘服务系统数据流图1. 用户点击上传文件选择对话框选择目标文件，提交给网盘服务系统；2. 网盘服务系统对文件的类型进行检查，文件类型校验需根据文件后缀和文件头信息进行双重校验（支持常用的文件类型）,文件类型可配置；3. 网盘服务系统对文件服务系统发起上传文件请求；4. 文件服务系统对检查应用系统上传权限，判断父目录是否存在，应用系统是否有权限上传到该目录下；5. 文件服务系统检查应用系统空间是否超限；6. 保存文件流到临时目录中；7. 调用杀毒引擎对对文件进行病毒扫描；8. 将扫描后无病毒的文件存入到文件存储系统。网盘数据流图网盘服务系统功能设计网盘服务器系统包括文件上传、下载、文件管理、目录管理、文档检索、文件共享等功能，功能组成图如下：文件上传我的网盘页面，有上传文件，新建文件夹，下载文件，删除文件目录，复制文件功能、容量展示区域，如下图：上传文件功能，支持断点续传，分片文件上传，暂停/开始单个文件上传，并且上传进度条。如下图：普通文件上传：支持用户上传文件的权限；用户可以查看文件上传后在服务器端的状态；支持多种文件格式类型上传。文件断点续传：系统支持文件断点上传，当用户由于网络、系统故障、页面跳转等原因中断文件上传后，再次上传同一文件时，自动从断点处继续上传；文件在服务器端不存在，新建一个临时文件保存文件流文件下载网盘提供文件下载功能，支持断点下载，支持单个文件下载流量控制以及下载连接数控制。如下图：1. 网盘用户选择目标文件发起下载请求；2. 网盘检查用户是否拥有访问权限；3. 网盘调用文件服务系统下载接口进行下载。文件管理支持网盘用户对文件的重命名、删除、更新文件、移动等操作。重命名：支持网盘用户对单个文件进行重命名。删除：支持网盘用户批量删除文件。支持软删除（物理文件不删除）和硬删除（物理文件删除）。更新文件：支持网盘用户对目标文件进行更新。如果文件更新前被引用，更新操作对引用无影响；如果更新前被共享，接收共享者能及时看到更新的内容。移动：支持网盘用户将文件移动到其它目录下。目录管理网盘提供创建目录功能，网盘用户可以在指定的目录下创建新目录，目录最大层级可配置。有重命名功能，并且提供删除目录的功能，不递归删除子目录内容，目录下有内容提示用户先删除内容。支持网盘用户将目标目录移动到其它目录下。文档检索网盘提供文件检索功能，网盘用户检索可以自己上传的文件（支持全文检索）、发出共享的文件以及接受共享的文件。文件共享网盘提供文件或目录共享功能，可共享给多个人。或者取消已经共享的文件或者目录。文件服务系统文件服务系统建设内容文件服务系统为应用系统提供文件管理、目录管理、权限管理、系统管理、监控管理、病毒扫描、日志记录等基础服务。文件服务系统方案设计文件服务系统包括文件管理、目录管理、权限管理、病毒扫描。系统组成图如下：文件服务系统组成图文件服务系统架构文件服务系统架构主要包括数据层、服务层和应用层。系统架构图如下：文件系统架构图文件服务系统数据流图1. 应用系统发起上传文件请求到文件服务系统；2. 文件服务系统检查应用系统是否有上传权限；3. 文件服务系统检查应用系统是否空间超限；4. 文件服务系统检查文件是否已经存在；5. 用户从断点处上传文件流到文件服务系统；6. 文件服务系统将文件流追加到已经存在的文件中；7. 文件上传完毕，调用杀毒引擎进行病毒扫描；8. 文件扫描正常，将文件移动到文件存储系统，并更新文件安全状态。文件系统数据流图

文件服务系统功能设计文件服务系统功能包括文件管理、目录管理、权限管理和病毒扫描。系统组成图如下：文件管理上传：应用系统可以将文件上传到文件服务系统保存，文件服务系统返回逻辑文件ID，用户可以根据此文件ID获取文件的元数据信息、下载文件等操作；下载：文件服务系统提供文件下载功能，支持断点下载；获取文件信息：应用系统可以根据文件的逻辑文件ID获取该文件的元数据信息。文件元数据信息主要包括两部分信息：物理文件信息（物理文件ID、原始文件名、文件所有者、文件安全状态、文件大小、文件指纹、文件类型、上传时间、最后修改时间）、逻辑文件信息（逻辑文件ID、文件名、物理文件ID、父目录ID、节点路径、状态、引用数、文件标签）等；删除文件：应用系统可以根据文件的逻辑文件ID删除目标文件。重命名：应用系统可以对目标文件进行重命名；移动：应用系统可以讲目标文件移动到指定目录下；复制：应用系统可以讲目标文件复制到指定目录下；更新文件：应用系统编辑目标文件后可以重新保存到文件服务系统。目录管理创建：文件服务系统提供创建逻辑目录功能。删除：应用系统可以根据目录的逻辑目录ID删除目录信息。移动：应用系统可以讲目标目录移动到指定目录下。重命名：应用系统可以修改目标目录的目录名权限管理设置资源权限：文件上传者可以将资源权限分配给给其他用户。说明：资源包括目录和文件。权限级别包括只读、可写、可操作。删除资源权限：资源所有者可以删除指定的资源权限。病毒扫描文件服务系统支持按文件路径和文件流的形式对文件进行病毒扫描。文件服务管理系统文件服务管理系统建设内容文件服务管理系统提供文件服务管理功能，包括系统管理、监控管理、文件定时扫描、临时文件定时清理等服务。管理员的身份由统一用户管理平台分配。文件服务管理系统的参数校验规则参考互联网校验惯例，比如邮箱地址校验规则、手机号码校验规则等，文本内容不做敏感词校验。文件服务管理系统方案设计文件服务管理系统包括应用系统登记、容量监控、病毒文件管理、定时清理文件、定时扫描文件、网盘用户管理等功能。系统组成图如下：文件服务管理系统组成图

文件服务管理系统架构文件服务管理系统架构包括数据层、服务层、应用层和用户层，系统架构如下：文件管理系统架构图

文件服务管理系统数据流图1. 管理员填写应用系统基本信息（系统名、密码、描述信息、流量限额、存储空间限额），提交注册请求，前端对参数进行校验；2. 文件服务管理系统检查应用系统名是否存在；3. 文件服务管理系统生成唯一的系统ID，应用系统可以根据此系统ID以及密码来访问文件服务系统；4. 文件服务管理系统为应用系统创建存储根目录。

文件服务管理系统功能设计文件服务管理系统功能包括应用系统登录、容量监控、病毒文件管理、定时清理文件、定时扫描文件和网盘用户管理，系统组成图如下：应用系统登录1、应用系统注册：系统管理员可以将指定的应用系统注册为一个应用系统用户，管理系统会分配对应的系统ID以及存储空间2、编辑应用系统信息：文件服务管理系统支持管理员编辑应用系统的基本信息（系统名、流量限额、空间限额、描述）。3、查看应用系统详情：文件服务管理系统支持管理员查看应用系统的基本信息。4、查询应用系统列表：文件服务管理系统支持按条件（系统名）查询应用系统列表。容量监控1、文件存储系统容量监控文件服务管理系统支持对文件存储系统容量进行监控，提供容量报警和空间使用报表，报警阈值可配置,告警级别分为：正常、一般紧急、非常紧急。2、应用系统容量监控：文件服务管理系统支持对应用系统容量进行监控，提供容量报警和空间使用报表，报警阈值可配置。

病毒文件管理病毒文件存放在隔离区，文件服务管理系统支持对病毒文件进行管理操作，管理员可以删除未被业务系统引用的隔离文件。定时清理文件文件服务管理系统支持定时清理未上传完文件。定时扫描文件文件服务管理系统支持对已经上传的文件进行后台定期扫描病毒，并可以根据时间区间范围等条件自定义文件扫描范围。

网盘用户管理网盘用户注册系统管理员可以将指定的深交所认证用户注册为一个网盘用户，注册页面可录入用户名、用户账号、空间限额（M）、流量限额（kb/s）、描述等信息。编辑网盘用户信息文件服务管理系统支持管理员编辑网盘用户的基本信息。查看网盘用户详情文件服务管理系统支持管理员查看网盘用户的基本信息。查看网盘用户列表文件服务管理系统支持按条件（用户名）查询网盘用户列表。禁用或启用网盘账号文件服务管理系统支持按禁用或启用指定的网盘账号。杀毒服务针对主流的杀毒引擎（赛门铁克、麦咖啡、卡巴斯基）进行POC选型。并且针对杀毒软件进行包装，开发杀毒服务接口，链接杀毒软件与网盘系统，保证数据文件存储的安全。系统部署及建设模式软件部署软件部署情况如下表：软件部署表警务云盘系统序号软件名称部署位置数量用户备注1网盘服务系统中心机房服务器12文件服务系统中心机房服务器13文件服务管理系统中心机房服务器14杀毒软件中心机房服务器1云盘子系统环境需求表1Windows/mac操作系统用户客户端1云盘所有用户2Oracle11g中心机房服务器1数据库工具3Redhatlinux企业版中心机房服务器4网盘服务器系统、文件服务系统、文件服务管理系统、杀毒软件

硬件部署针对本项目业务需求，在数据中心部署云盘服务器，包括网盘系统服务器、文件系统服务器、文件管理系统服务器、和杀毒系统服务器。用户在网络通过用户终端连接到服务器，即可使用云盘服务系统。如下图所示：设备部署图建设模式该项目由警务全资投建。

关键设备清单用途节点数服务器配置备注文件系统服务器122颗至强6核2.4Ghz处理器，32GB内存，6块600GB10K硬盘，2个万兆。按全市21272民警，每人平均1GB空间计算，需要总存储为：20.8TB按一个文件一个副本计算，需要总存储为：20.8TB*2=41.6TB网盘系统服务器12颗至强6核2.4Ghz处理器，64GB内存，2块600GB10K硬盘，2个万兆文件管理系统服务器12颗至强6核2.4Ghz处理器，64GB内存，2块600GB10K硬盘，2个万兆。杀毒服务器12颗至强6核2.4Ghz处理器，64GB内存，2块600GB10K硬盘，2个万兆。数据库服务器22颗至强6核2.4Ghz处理器，64GB内存，2块600GB10K硬盘，2个万兆。项目实施进度项目建设各期内容项目建议书编制及审批可研报告编制及审批初步设计编制及审批项目招投标各专项系统建设初步验收专项系统试运行最终验收质保期、运行维护实施进度计划工程进度计划的控制就是根据反馈的原理，对计划执行情况进行检查，并与工程进度计划对比，及时发现问题，及时解决问题，以保证工程进度计划按预定目标顺利实现。所以在工程实施过程中，要不断地将实际进度情况与工程进度计划进行比较，得出偏离计划的信息，及时找出原因，及时采取相应的措施，不断组织新的平衡，就是在动态控制中求平衡，这是对工程进度计划进行中有效控制的主要环节。要有效地掌控本次项目，须掌握和运用在项目实施过程中起作用的工程技术规律和管理规律。要善于运用这些规律来预测和把握项目进程的趋势和状态，制定进度控制的规划、程序和方法。1、进度控制的行政措施参与本项目工程有关各方必须加强统一领导，我方项目经理通过发布进度指令对进度进行指导、协调、考核，并利用激励手段和监督管理等方式进行进度控制。2、进度控制的管理措施加强对进度计划的编制、优化、实施、调整等环节的控制管理，及时掌握进度情况，适时组织召开工程协调会，协调各子系统在施工进度中的矛盾，加强薄弱环节，实现进度控制目标。3、进度控制工具工程日志：由工程实施组长每天填写工程日志，并提交进度控制工程师，由进度控制工程进行汇总，统计，分析，掌握项目进展情况，及时对进度异常进行识别、分析，提出改进建议，并提交项目组，项目组做出有针对性的应对。工程组工程周报：工程实施组织每周填写工程日志，包括本周工程内容、进度基准比较、问题与风险等项目例会、项目周报：由项目经理发起，汇报每周工程进展、问题、风险，差异分析，及重要的需要甲方决策的变更等。

项目实施进度计划表序号项目建设内容项目建设时间1项目建议书编制及审批2015年6月8日—2015年6月30日2可研报告编制及审批2015年7月1日—2015年7月15日3初步设计编制及审批2015年7月15日—2015年7月31日4项目招投标2015年8月1日—2015年8月31日5各专项系统建设2015年9月1日—2016年4月30日6初步验收2016年5月1日—2016年6月30日7专项系统试运行2016年7月1日—2016年9月30日8最终验收2016年10月8日—2016年12月31日9质保期、运行维护2016年12月31日—2019年12月31日备注：实际项目建设时间以投标时间为准。效益与风险分析项目效益分析社会效益从某种意义上讲，警务是我们这个社会最大的“信息资源中心”，警务管理国家的过程便是信息搜集、加工处理，并进行决策的过程。警务职能的正确履行依赖于适时准确的信息。警务是其民众的代表，它必须了解民众的需求；警务是社会发展的导航者，需要把握社会变迁的趋势，从而作出准确的战略选择。警务是社会问题的治理者，这要依赖于对社会问题信息的分析、判断和把握。警务是市场失灵的矫正者，而警务对市场失灵矫正的前提是最大程度地掌握信息。因此，信息及信息网络是现代警务地神经系统。而警务云盘服务系统无疑对警务存储、共享、搜集、处理信息提供了极大地便利。具体说来，警务云盘服务系统对警务管理乃至整个社会地进步具有重要意义。给最终用户带来的效益提高水准有利于提高警务地决策理性和公共政策地品质。警务云盘服务系统可使警务运用所获取和掌握的国家政治、经济、社会发展诸领域准确的、可靠的信息，以制定正确的决策，作出理性的判断并采取积极的行动，进而提高警务决策和公共政策的水准和质量。信息流通促进信息流通利用和平等共享。在网络社会，信息就是力量和财富的源泉。云盘服务系统可以收集、储存、分类信息，而且是信息资源的最大拥有者。因此，若能充分利用此资源，实现警务信息流通和共享，必将有助于警务工作的整体发展。资源配置警务云盘服务系统可以使人力和信息资源得到最充分的利用和配置。警务的行政和管理主要靠知识和智力，警务云盘服务系统的发展使警务工作人员面临着更多的知识和智力的压力，促使他们不断地去学习和更新自己地知识和技能。同时，网络地发展也为警务工作人员提供了更多的机会去学习新的知识和技能，为他们的素质提高创造了良好的条件，工作效率也讲大大提高。各级警务掌握着大部分的社会、经济文化信息以及全部的政策和法律信息，使信息资源不再面对毫无分类、杂乱无章的文字和数据，而是可以为社会所用，成为创造价值的富有生命力的无价之宝。也只有在警务云盘服务系统的前提下，真正意义上的网络社会和一体化才能够形成并发挥作用，信息的共享也才不是一句空话。项目风险与风险对策风险分析与识别初步识别项目中存在以下风险，在项目过程中我们将对这些风险进行跟踪监控，并不断识别可能的新的风险，在项目执行过程中对风险进行干预，规避、降低风险至可以接受的水平。外部风险外部风险包括气候环境问题、停电等问题。内部风险内部风险包括项目实施延期，设备出现异常故障。长期运行风险系统长期运行，可能导致一下问题：硬件设备老化，导致通讯不畅，影响设备运行或者数