山东政务信息系统整合基础信息资源库

1、山东省政务信息系统整合基础信息资源库项目需求和服务方案要求一、项目概况（一）建设目标全省基础信息资源库是面向全省电子政务信息化建设的统一政务信息资源管理平台。对全省基础信息资源库的大数据管理，整合全省政府部门的各类社会经济发展信息资源，打造集数据采集、数据处理、监测管理、预测预警、应急指挥、可视化平台于一体的大数据平台。（二）建设原则山东省基础信息资源库建设采用分布式处理技术，搭建大数据处理引擎和分析开发平台，提升结构化数据及非结构化数据的分析处理能力，支撑内外部信息资源的整合共享、海量异构数据的高效处理与数据服务能力的弹性扩展，实现大数据分析常态化，助力构建新型数据管理与分析体系。（1）遵循

2、国家标准，坚持统一规划（2）重视系统安全建设，保证数据的安全性（3）遵循省级电子政务顶层设计，做好规划设计（4）制定合理的实施与运维方案，保障系统顺利实施（5）完善数据利用长效机制，保证数据接入和应用业务连续性（三）建设周期6个月（含上线试运行期1个月）。（五）采购清单序号名称单位数量技术要求1数据基础支撑系统项1具体要求见:数据基础支撑系统建设。2数据整合服务建设项1具体要求见:数据整合服务建设。3基础数据库建设项1具体要求见:基础数据库建设。、建设内容（一）数据基础支撑系统建设数据基础支撑系统需要采用当前主流、先进技术架构，全面兼容当前大多数政务业务应用，支持分布式的数据存储、数据处理和数

3、据计算引擎，可以提供支撑海量、多格式、动态增长的信息存储、数据分析计算等基础大数据工具和服务能力。1 .系统基础支撑功能需求(1)数据接入和共享组件实时数据采集：提供高可用的，高可靠的，分布式的海量日志采集、聚合和传输能力。支持在日志系统中定制各类数据发送方，用于收集数据，同时提供对数据进行简单处理，并写到各种数据接受方的能力。批量数据集成：实现数据基础支撑系统与关系型数据库、文件系统之间交换“数据”、“文件”，同时也可以将数据从关系型数据库或者文件服务器导入到数据基础支撑系统的HDFS/HBase中，或者反过来从HDFS/HBase导出到关系型数据库或者文件服务器中。分布式消息队列：提供分布

4、式、分区化、多副本的消息发布-订阅。支持消息持久化、高吞吐、分布式、多客户端支持、实时等特性，适用于离线和在线的消息消费场景。(2)分布式文件系统提供高吞吐量的数据访问，实现大规模数据可靠的分布式读写，保证一个文件在一个时刻只被一个调用者执行写操作，而可以被多个调用者执行读操作。通过配置实现当数据节点有一个目录还可用的时候，数据节点服务依然可用的效果。(3)分布式数据库提供适合存储海量非结构化数据或半结构化数据的、具备高可靠性、高性能、可灵活扩展伸缩的、支持实时数据读写的分布式存储能力。支持库级别本地备份、批量导出和数据恢复，支持全量、增量两种模式。用于集群故障、人为误操作导致的数据丢失，同时

5、提供对于列簇级别进行加密。(4)并行数据库支持基于x86服务器、Share-Nothing分布式执行的开发架构，采用并行数据库来解决海量结构化数据处理问题，提供处理PB级海量结构化数据存储和分析能力，通过控制模块的协调，并行地完成大规模的数据处理工作，实现对数据处理的快速响应。(5)关系型数据库提供基于云计算平台的即开即用、稳定可靠、弹性伸缩、便捷管理的在线关系型数据库服务。(6)分布式计算框架实时计算提供实时流式数据处理的系统，支持流式查询语言，可以快速进行业务开发。交互式计算交互式内存计算：提供快速的计算、写入以及交互式查询的框架。支持交互式的数据分析、交互式的数据挖掘，避免繁忙的磁盘IO

6、。提供分布式流数据处理能力，允许无缝地处理集群中任何工作节点的故障。交互式分析：实现交互查询下的SQL分析引擎功能。支持HDFSa据本地访问的最大化，直接访问HDF缴据，全面支持传统应用的接口JDBCODBC提供复杂查询、关联分析功能。离线计算提供分布式批处理引擎，具备大规模数据集(大于1TB)的并行运算能力。支持对于资源根据队列进行分配，不同队列分配不同比例的资源。对于用户提交的任务，支持对任务所需的CPU资源与内存资源进行控制。智能分析算子集构建有监督学习(SVMRandomForest、LogicRegression等)、无监督学习(DBScanAffinity、Propagation等

7、)、协同过滤等智能分析算子集，提供一站式、端到端的数据分析全流程平台支撑。(7)全文检索组件提供全文检索，高亮显示，层面搜索，近实时索引，动态聚类，数据库整合，文档(如Word、PDF格式)处理和地理信息搜索等能力。(8)数据仓库组件提供用来进行数据提取转化加载(ETL)的工具。支持对表的某一列或者多列进行加密，实现根据指定的分隔符查询表数据。(9)任务调度平台能够为各类应用程序进行资源管理和调度。2 .系统管理需求系统管理建设方面，实现服务资源管理、权限管理、平台监控、多租户等。实现安装部署、性能监控、告警、用户管理、权限管理、审计、服务管理、健康检查、日志采集、升级和补丁等功能。(1)服务

8、资源管理信息资源服务管理功能模块主要包括服务资源的申请和审批、服务情况统计分析功能，对于使用者的角色可以分为服务申请角色和服务管理角色。(2)权限管理权限管理体现在对业务、系统、应用、数据等不同层面的权限控制，集成RBAC勺多租户资源访问，可以为用户/用户组定义多种不同的角色类型。主要包括：用户管理、角色管理、用户权限分配与查询、角色权限分配与查询、权限申请与审批、权限设置、权限审计、权限维护方面的内容。同时支持对用户进行批量授权管理。(3)平台监控支持从以下层面进行监控预警。基础环境监控：监控IT系统基础环境及各项业务系统的运行情况，建立集中的告警分析处理和故障预警机制。包括服务器、存储、网

9、络、系统软件、中间件(包含应用服务器、数据库等)、应用系统的运行状态的监控和预警。系统监控：监控信息资源服务平台中支撑环境、数据资源、服务资源的运行状态和平台自身应用功能的运行状态，及时发现故障并报警反馈。数据监控：对监控采集的历史信息进行多维度统计分析、发现存在隐患；服务监控：对平台提供的服务资源进行监控，保证服务的可行性和准确性。平台模块监控：监控各模块中的子功能的调用情况、用户数、操作功能及相关统计分析。监控日志统计分析：通过对平台的系统、数据、服务、平台等多方面的监控日志进行分析、统计，提供分析报告。故障预警与管理：建立故障管理模块，在处理故障的同时，对平台运行过程中发生的各类故障，详

10、细记录故障现象、故障原因、处理方式及发生时间等相关信息，逐步形成平台运行维护管理信息库和知识库。应用日志安全审计：在数据库层和应用层同时开展应用日志采集，建立面向终端用户及对接应用系统各个层面的资源应用审计功能，实现终端用户或对接系统用户应用行为的全程记录，实现数据资源访问操作异常行为的审计追踪和预警提示。软件批量安装部署工具：针对分布式集群节点数量多的特点，要求提供批量规划、安装部署工具。该工具应能批量并行地安装部署集群服务器节点的相关软件，加快安装部署的速度。命令行工具与图形化工具的数据库监控与管理：提供命令行工具和图形化工具用于访问、控制和管理集群环境。及时获取集群整体状态，并对集群进行

11、管理。实现管理集群环境中的数据库、表、索引、视图、存储过程和函数等数据库对象，实现集群环境中用户权限的管理，实现对集群日志进行审计与管理，实现管理集群数据表的记录管理。运维行为管理：能知道是谁、有何权限、做了哪些运维操作，能感知影响范围并结合其权限来决策能否执行。详细记录运维人员的操作日志。建立运维审批机制，影响较大的运维操作需逐级审批。日志管理功能：用户可以通过设置查询条件来查询日志，了解用户操作、管理平台和资源池运行情况，并能对其集中进行查询操作，而不需要登录每台节点进行处理；管理平台要求提供操作日志、系统日志、审计日志记录等功能。(4)多租户管理为了提高资源利用率和集群吞吐量，满足城市多

12、种业务需求，大数据平台以多租户进行管理，允许各平台用户使用本平台资源及数据。主要功能包括用户注册、用户管理、用户权限分配、用户资源配置等功能。设置租户CPU内存，I/O,存储等资源计划，支持多种的调度模型，同时提供租户资源的使用统计和报表。(5)服务Portal建设通过服务Portal进行统一登录，提供GUI界面的人机接口，各操作能提供图形用户界面进行操作维护。具备通用接口能力，实现与第三方产品集成。3 .安全功能需求（1）平台安全安全方案制定：制定数据基础支撑系统的安全方案，对数据导入、查询、分析、导出等流程进行安全管理，制定系统应急预案，确保大数据体系安全稳定运行。针对海量用户数据，提供异

13、地实时容灾和备份功能保障客户数据的机密性、完整性和可用性。身份鉴别和认证功能：平台提供支持Kerberos的统一认证，客户端访问组件服务时，需要经过Kerberos机制认证，认证通过后才能访问组件服务。审计安全：支持记录审计日志，审计日志可用于安全事件中定位问题原因及划分事故责任，平台审计日志中需记录用户操作信息，以便快速定位系统是否遭受恶意的操作和攻击。（2）数据资源安全实现数据去隐私管理、数据脱敏管理、数据存储安全、数据保密、数据操作、数据还原、数据泄露可溯源和对外接口安全管控。去隐私策略管理：可基于数据模型设置数据去隐私策略（加密算法、模糊化等），可基于用户角色设定允许进行数据还原的权限

14、范围；数据脱敏管理：支持密钥安全管理、主密钥和工作密钥管理、工作密钥的生命周期管理等数据脱敏管理功能数据存储安全：从底层存储开始保护，实现数据库安全、支持HDFSa据加密以及数据脱敏等功能。数据保密：在文件系统数据加密基础上，支持Hive实现表级加密，支持HBase实现列族级加密，在创建表时指定采用的加密算法，即可实现对敏感数据的加密存储。数据操作安全管控：实现平台使用人员、开发测试和计算任务的安全管控。包括开发测试工具安全、MR任务以及Spark调度安全、HiVe/Hbase授权管理和操作记录审计日志功能。数据还原：具有相关数据权限的操作人员可自定义数据加工流程，对加密的数据进行还原；还原的

15、操作过程将被记录到安全审计日志中；数据泄露可溯源：数据遗失后，可通过数据水印等技术追溯数据流转环节。对外接口安全管控：实现业务部门数据提取及访问接口安全。包括服务调用鉴权、报文加解密、SQL脚本安全、安全网关等功能。（二）数据整合服务建设1.数据标准管理（1）标准文件管理维护国家、地方的标准文件，包括标准的名称、标准发布时间、标准发布部门、有效期限、标准发布备注、标准正文附件、标准种类（国家标准、地方标准、部门标准），标准分类（灵活分类）。根据标准文件关联情况，可以查看关联到标准文件的所有数据标准主体、数据标准项的情况。(2)标准代码管理标准代码分类管理，按照多层次分类的方式，进行分类管理，可

16、以按照国标、地标等维度进行分类。支持对标准代码及代码项维护管理。支持对标准代码项比对管理。根据代码关联情况，可以查看关联到标准代码的所有数据标准主体以及具体关联的数据标准项的情况。(3)数据标准主体管理数据标准主体分类管理按照多层次分类的方式，进行分类管理，可以按照部门、行业等维度进行分类。根据具体的业务，可以形成多种数据标准主体，比如案件信息，主体可以维护多个扩展属性用于对主体的详细描述，包括属性名称，属性内容。提供复制功能，可以在不同分类下面进行主体复制。(4)数据标准项管理数据标准项维护，每个主体下面，可以添加多个标准项。支持数据标准项管理。(5)标准归一化为数据标准与元数据字段建立映射

17、与优先级关系，资源申请时通过数据标准直接取到所需数据，即数据标准可以关联不同表中不同字段，查询条件为身份证号码(个人)或统一信用编码(法人)，资源申请时根据条件及优先级依次查询，取得关联字段包括统计未映射元数据的数据标准及未映射数据标准的元数据。2.数据质量管理(1)数据质量检查实现对数据的空值、值域、规范、逻辑、重复数据、及时性、缺失记录、完整性等方面进行质量检查。(2)质量规则管理对质量管理中需要使用的规则进行分类管理，并对质量检查规则库进行维护。(3)数据质量检查通过对数据质量检查规则配置，建立质量检查标准，支持人工、定时任务核查管理。(4)数据质量问题查询以列表的形式展示所有的核查错误

18、记录，并且提供源记录查看连接。(5)数据质量监控对每天的核查错误数量进行统计，数据波动比较大的时候自动发出预警。核查任务改造，核查完成后，如果存在问题，发送代办事项给部门人员(6)数据质量问题分析对数据质量问题进行多维度分析，包含个规则问题数、变化趋势、质量占比、综合情况等维度进行统计分析。(7)质量评估报告根据数据质量检查任务生成质量评估报告，支持对评估报告管理及评估报告生成。(三)基础数据库建设建设山东省人口、法人单位、公共信用、宏观经济基础数据资源库。建设方案要综合考虑山东省实际情况，满足山东省政务信息系统整合共享整体工作规划要求，通过标准的数据清洗比对，数据处理、数据入库等方式基础数据

19、库，以满足全省对共享统一基础数据需求。1.人口库建设(1)数据标准本次项目需要配套建设人口数据库标准规范，制定并完善数据元标准、数据分类与编码标准、数据库设计规范等配套的标准规范集。(2)目录梳理以人口基础信息、社会活动、社会资源、社交关系、涉事涉法等维度为依据，建立三级人口目录，统一汇聚人口基本信息和人口扩展信息；包括但不限于人口出生信息、人口医疗信息、人口教育信息、人口工作信息、人口婚姻登记信息、技能等级信息、人口房产登记信息、人口机动车登记信息、五险一金信息、家庭成员信息等内容目录。(3)数据模型人口基础数据库是以公安部门核实的实有人口信息为基础，接入公安、教育、民政、人力资源和社会保障

20、、卫计等单位扩展信息，建立以公民身份证号码为唯一代码的实有人口资源库，实现以人口档案管理为基本，延伸到人口信用、健康、教育等关联信息。需能够描述人口的概念数据模型、逻辑数据模型(E-R图)、物理数据模型以及人口的基本信息、扩展信息等内容。(4)数据清洗、实施以人口数据库标准规范为导向，完成人口数据库数据的清洗、转换、归类与加载，建成统一规范化、标准化的人口数据库。(5)人口数据库服务管理查证：根据公民身份号码进行身份核查，显示姓名、性别、民族、生出日期、住址、照片等信息，用于核实确认公民身份。查证时在查证页面显示当前登录用户的水印。比对：对各部门上传的人口数据进行核查比对，并反馈差异，支持批量

21、比对。身份验证：身份验证是通过输入个人身份证号、姓名字段与人口基础信息库进行比较，从而提供对公民身份信息存在性、真实性的确认。重名查询：重名查询是通过输入姓名信息，通过系统反映同名同姓人员的情况，可为新生儿父母为小孩取名、个人重名信息了解等提供可靠的信息参考。通过重名查询，可为社6会公众提供同名同姓人员数量、同名同姓统计等感兴趣的信息，并可按照性别、所在区域、参考年龄段等不同维度进行统计呈现。身份证挂失查询：身份证挂失查询是通过输入身份证号、签发日期等信息，通过与系统的信息核对，从而确认所核对身份证件的有效性，避免他人冒用遗失身份证件进行非法用途。快速接口开发：可以通过图形化方式快速开发接口，

22、供第三方方便使用。(6)统计分析人口统计人口静态统计分析：人口总数、人口密度、性别构成、年龄构成、受教育成都等维度统计；人口动态统计分析：出生率、死亡率、人口自然增长率等维度统计；人口其他数据统计分析：就业人口、失业人口等维度统计；人口变化及影响统计分析：人口剧增、人口老龄化、就业问题等维度统计；人口预测人口规模预测，以当前人口数量为基数，按照人口统计学中算术级数推算法和几何级数推算法，推测未来5年的人口发展情况，用折线图显示。出生人口预测，以当前人口数量为基数，按照人口统计学中出生率法和一般生育率法推算法，推测未来5年的出生人口发展情况，用折线图显示。劳动人口预测，以当前人口数量为基数，以男

23、性18到59周岁，女性18到54周岁人员作为劳动力统计标准，推测未来5年的劳动力人口发展情况，用柱状图和折线图结合显示。老年人口预测，以当前人口数量为基数，以满60周岁人员作为老龄人口统计标准，推测未来5年的老年人口发展情况，用柱状图和折线图结合显示。(7)人口库数据更新基础信息更新：基础信息更新需要由公安厅人工核对后增量更新，如果发现基础信息有误的，提交给公安厅进行人工处理后增量更新。扩展信息更新：扩展信息则根据扩展信息设定的更新频率按谁主管谁负责的方式进行增量更新。2 .法人库建设(1)数据标准需要配套建设法人数据库标准规范，制定并完善数据元标准、数据分类与编码标准、数据库设计规范等配套的

24、标准规范集。(2)目录以法人基本信息、资本与资产、许可资质及荣誉、纳税参保及缴费、生产经营、行政执法、司法信息、评价信息为依据，建立三级法人目录，统一汇聚法人基本信息和法人扩展信息，包括但不限于登记信息、续存状态、成员及人员信息、场所信息、资本信息、固定资产、无形资产、其他资产、许可信息、备案信息、资质、荣誉、涉税信息、五险一金、商业保险、公共支付、农林牧渔、采矿、制造、电热水气、行政处罚、行政强制、行政征收、行政裁决、司法判决、犯罪档案、强制执行、信用监管信息、社会评价信息等内容。(3)数据模型法人基础数据库是以相关部门核实的实有法人(机构)信息为基础，接入市场监管、税务、民政、人力资源和社

25、会保障等单位，建立以组织机构代码或工商注册号为唯一代码的法人资源库，实现法人登记信息、信用信息、股东信息、税务信息等扩展信息的展示。需能够描述法人的概念数据模型、逻辑数据模型(E-R图)、物理数据模型以及法人的基本信息、扩展信息等内容。(4)数据清洗、实施依据法人数据库标准规范，完成法人数据库数据的清洗、转换、归类与加载，建成全省统一规范化、标准化的法人数据库。(5)法人数据库服务管理校验：校验服务根据校验处理规则，政府用户上传待校验数据(单条数据、文本文件、数据库文件)后，与数据库中标准数据进行校验，显示校验结果和差异记录，以页面或特定的文件格式反馈给用户。包括：校验数据导入、数据格式转换、

26、校验计算、结果反馈等模块。经营异常查询：可查询经营异常的企业信息。严重违法查询：可查询严重违法的企业信息。快速接口开发：可以通过图形化方式快速开发接口，供第三方方便使用。(6)统计分析初步综合分析，针对本系统采集的法人基础信息，进行加工和分析。能够生成综合分析报告，报告内容以图、文、表三种方式展现。初步综合分析包括法人单位的注册数量、注销数量、吊销数据，主要发生的行业；年检总体情况，盈利较高的行业，负债较高的行业；许可证的发放总体情况，发放的主要行业。地区综合分析对各地区法人类型、规模等信息实现多维度的分析、比较、研究，能够根据具体的决策问题灵活调整报表。从详细分析法人的现有数量及分布，年度、

27、半年度、季度、月度的注册、注销、吊销的数量，以及与历史同期数量的比较，查看其发展变化趋势。行业综合分析对山东省各行业的法人单位的发展情况实现多维度的分析、比较、研究，能够根据具体的主题灵活调整报表。从行业的角度，生成行业分析报告。查看重点行业的新增、注销、吊销法人的数量、注册资金、年检盈利、年检负债情况。分析年度、半年度、季度、月度的数据，分析变化趋势，找出潜在规律，以图、文、表三种方式展现。指标排名综合分析对法人基础信息数据库的可比性指标，进行多维度的排名分析、比较、研究，能够根据具体的决策问题灵活调整报表。生成关于年检情况、编办非正常户情况的综合分析报告。年检情况包括全年销售总额、全年纳税

28、总额、全年利润总额、年末资产总额、全年亏损总额、年末负债总额。分析年度、半年度、季度、月度的数据，分析变化趋势，找出潜在规律，报告展现方式为图、文、表三种相结合。经济类型综合分析对山东省各经济类型的法人单位的发展情况实现多维度的分析、比较、研究，能够根据具体的主题灵活调整报表。按照法人的经济类型进行综合分析，生成综合分析报告，报告内容主要侧重于各种经济类型下的法人总数、年度、半年度、季度、月度的新增、注销、吊销数量、年检盈利、纳税及亏损情况，与历史同期进行比较分析，分析变化趋势，找出潜在规律。(7)法人库数据更新基础信息更新：基础信息更新需要由市场监管、民政、编办核对后增量更新。如果发现基础信

29、息有误的，提交给上述部门进行处理后增量更新。扩展信息更新：扩展信息则根据扩展信息设定的更新频率按谁主管谁负责的方式增量更新。3 .宏观经济库建设(1)数据标准需要配套建设宏观经济数据库标准规范，制定并完善数据元标准、数据分类与编码标准、数据库设计规范等配套的标准规范集。(2)目录以国民经济、价格指数、居民收入、固定资产投资、景气指数、对外经济贸易、金融信息、财政信息、行业信息为依据，建立三级目录，统一汇聚宏观经济基本信息和扩展信息，包括地区生产总值、居民消费水平、城乡消费水平对比、收入类别、支出类别、基础设施投资等数据。(3)数据模型建立运行分析主题库、企业评判指标体系、企业运行预测分析模型，

30、对企业运行情况进行“运行监测、评价监督、决策支持”。实现宏观经济库的三级分类建设。(4)宏观经济库数据清洗实施依据宏观经济数据库标准规范向，完成宏观经济数据库数据的清洗、转换、归类与加载，建成全省统一规范化、标准化的宏观经济数据库。(5)宏观经济数据库服务管理一是宏观经济信息查询。为公众、部门提供月度数据、季度数据、年度数据、普查数据、部门数据等宏观经济相关数据的查询和使用。二是宏观经济地图展示。基于山东省现有地图资源实现对山东省宏观经济数据上图应用，实现宏观经济数据地图统计分析、管理等功能。三是对山东省国内生产总值、劳动生产率、居民消费价格、财政、工业进行图文结合的可视化专题服务。(6)宏观

31、经济数据库统计分析根据实际需求将若干个综合性指标，如反应宏观经济、价格指数、固定资产投资、经济贸易、金融发展、财政收入等方面的指标进行专题数据统计与分析。(7)宏观经济数据库数据更新宏观经济数据库主要有各部门根据宏观经济指标更新频率，实现数据的更新。4 .公共信用库建设(1)数据标准需要配套建设公共信用数据库标准规范，制定并完善数据元标准、数据分类与编码标准、数据库设计规范等配套的标准规范集。(2)目录以个人、企业等主体为主要依据，建立三级目录，统一汇聚公共信用基本信息和扩展信息，包括包括行政类、公共事业类、资产信贷类、社会化类等信息。(3)数据模型基于统一信用信息库，实现公共信用信息管理，进

32、行个人、企业等各类主体的信用评价分类标准建设；对公共信用领域提供支撑，为与公共信用密切相关的重点应用提供支撑。(4)数据清洗、实施依据公共信用数据库标准规范，完成公共信用数据库数据的清洗、转换、归类与加载，建成全省统一规范化、标准化的公共信用数据库。(5)服务管理一是提供标准化的信用产品输出以及快速安全接入服务；建设信用监控体系和模型；实现对信用主体的标签管理、标签分类、画像分析。二是公共信用地图演示。基于山东省现有地图资源实现对山东省公共信用数据上图应用，实现公共信用数据地图统计分析、管理等功能。(6)统计分析信用综合统计分析对全省各地区、各领域的主要信用信息进行综合分析及预警监管，实现山东

33、省社会信用体系建设长效运行。具体包含黑名单与红名单数量统计、信用指数年龄变化、信用排行、区10域分布热力图、山东省知名企业信用轨迹、地区信用指数、部分失信行业企业数分析、行业失信等内容。信用多维分析采用多维分析技术，实现对统一信用主题多视角的分析展示，包含信用主体数量分析、信用事项类型分析、信用事件分析、信用区域趋势分析、黑红名单分析等内容。信用资源分析对山东省信用信息资源的汇聚、查询和利用进行综合分析和监控，包含信用资源查询检索情况、近期整体信用变化趋势对比、信息资源汇聚情况、近期山东省企业/个人信用变化趋势、信息归集、近期行业信用变化趋势等内容。(7)公共信用数据库更新由相关部门根据信用目

34、录的更新频率，实现数据的更新。三、建设要求(1) 技术要求1 .数据基础支撑系统技术要求(1)支持主流、先进标准，保持开放性，具备可靠性、安全性、可管理性，并能够进行版本平滑升级。(2)支持基于全对称分布式的Active-Active多节点集群架构，系统设计无单点故障。(3)支持ACID强事务一致性，提供分布式事务机制。支持单表并发IUD(Insert、Update、Delete)。支持灵活选择建立行存表、列存表。支持完善的分区管理功能分区drop、add、truncate、merge、split、exchange>cluster、alterindexunusable。(4)具有良好硬件

35、兼容性，平台软件支持部署于2路4路国产CPU服务器上。(5)支持业务无感知的滚动升级，保证升级过程不影响业务。(6)投标人须承诺数据基础支撑系统无缝对接采购人的可视化和展示平台，并不另行收取费用。2 .数据整合服务技术要求(1)本项目实施工作涉及到数据对接的要求，存在修改或定制开发接口的可能，投标人不得另行收费或因此延长工期。(2)支持采集国内外主流关系型数据库，包括Oracle、DB2SQLServer、MySql、PostgreSQL、Greenplum;支持采集基于开源ApacheHadoop的商业发行版大数据平台，包括HDFSHIVE、HBASE(3)兼容ETL技术，支持采集基于ket

36、tle以及其他至少一种商用ETL数据处理流程的元数据。(4)通过识别技术元数据与业务元数据的关系，智能生成待治理表的质量规则。(5)支持根据质量规则，智能生成数据质量流程。提供可视化图形界面，支持无需编码即可灵活、方便地定制出各种数据质量流程。支持质量校验流程的在线调试及数据预览。(6)内置多种数据校验组件，支持拖拽的方式快速构建各种数据校验流程化设计。(7)提供全量同步，增量同步等多种模式校验数据。(8)支持问题数据闭环流程处理。(9)提供统一的调度引擎，支撑各种复杂的任务调度流程的高效运行，为海量的异构数据校验和数据同步提供保障。(10)支持手动触发、计划任务触发以适应人工参与、自动化无人

37、干预的批量数据校验、同步等多种场景。(11)支持任务调度周期性配置，支持配置分钟级、小时级、天级、周级、月级的策略，支持按需配置出任意的执行周期。针对所有任务配置时间和任务以往运行时长智能推荐用户任务调度周期，达到系统资源最优化。(12)支持集群部署，支持集群环境并行处理任务，允许将任务部署在多台服务器上并发执行，从而将任务处理分摊到多台服务器上。(13)状态监控：支持实时监控任务进度；支持在线查看调度结果。3 .基础数据库建设技术要求采用支持Share-nothing架构的MPPD产品承载结构化数据，采用支持主流大数据社区技术架构的大数据平台承载非结构化数据。(2) 性能要求1 .稳定性指标

38、：系统总体可用率99.7%,数据库应用可用率=99.8%,WEB应用可用率=99.8%。(或7X24小时不间断运行)2 .数据量指标：前置库指标：支持多集群模式的部门前置库扩展，单个前置库支持千万级别数据上传和存储。基础库、主题库指标：支持十亿级别数据的存储以及索引。3 .数据库备份性能指标：数据备份按照7天增量备份一周全量备份进行备份，备份性能按照实际数据大小折算，平均1秒/Gb4 .数据库恢复性能指标：数据备份按照7天增量备份一周全量备份进行备份，备份性能按照实际数据大小折算，平均1秒/Gb5 .故障恢复指标：电话服务工作时间：7*24电话受理服务请求或帮助客户解决技术问题。响应时间：接到

39、报修后1小时内予以实质性响应，需要现场支持的情况，工程师2小时内到达服务现场。故障恢复时间：简单应用故障6小时解决问题并恢复系统正常运行；复杂应用故障12小时内解决问题并恢复系统正常运行。6 .并发量指标：批量数据交换中，平均单条记录数据交换的时间不大于20毫秒。非并发大批量数据交换(百万条)的时间不大于5,000秒。批量数据交换中，平均单条记录入库的响应时间不大于20mso查询基础数据(精确匹配)的响应时间不大于3秒。查询单个数据主题(百万级)的响应时间不大于3秒。目录检索的响应时间不大于2秒。查询统计报表(非实时统计)的响应时间不大于3秒。7 .操作响应指标：支持500个第三方业务系统同时

40、访问数据服务接口的要求，接口响应时间<=3秒。支持单个第三方业务系统同时访问数据服务接口要求，接口响应时间<=10毫秒。(三)安全要求8 .数据基础支撑系统安全要求(1)满足等保三级的相关标准要求；(2)支持使用OpenPGP方式进行数字签名保护，安装过程中各节点支持对安装包的SHA256校验，防止软件包或者程序被篡改；(3)支持按照用户需要对HBase和Hive中的数据进行列加密。即可以按照用户需要，对所有数据进行加密，也可以只对部分关键数据进行加密；(4)支持在对HBase和Hive进行数据加密时，能够实现AES128和SM4算法；(5)支持业务平面与管理平面隔离组网，保证业务

41、、管理各自网络平面的独立性与安全性；(6)支持基于角色的用户权限管理和基于WebUI的统一的用户管理界面。9 .基础库安全要求(1)数据库安全?限制客户端IP访问，支持访问IP地址白名单管理。?能够明确数据端口层面配置安全策略。?提供数据库账号安全配置策略。?提供数据库安全加密方案。(2)数据访问安全?数据查询安全支持详细的查询操作记录，浏览器客户端不允许缓存查询数据，查询界面支持水印设置、禁止复制等功能。?针对敏感数据必须有数据脱敏访问措施及机制。?提供数据历史追溯功能。（3）数据传输安全?在访问或引用基础库数据时，能够提供数据传输安全保障措施。?支持Https协议实现加密传输，Https协

42、议保证了传输过程中数据无法被解密或窃取。四、实施要求（一）项目人员投标人应说明为满足本项目实施需要，拟成立的本项目实施团队的管理组织机构，包括人员的配备、分工，并附上参加本项目的主要管理、技术人员一览表，主要人员个人简历表、主要人员的相关从业资格证书/类似项目经验，并承诺项目周期内实施人员的稳定性，项目核心人员不发生变动。在项目组人员构成方面，应配备如下几类人员：项目经理、需求分析师、软件工程师、技术负责人、驻场保障人员、系统测试人员、协调和管理人员、文档编写人员。项目组成人员应熟悉电子政务、共享交换、运维系统、云计算技术、数据库技术等领域知识。（二）测试、安装及培训要求1、测试要求系统的功能

43、、非功能等要求在阶段性验收、整体竣工验收时，要通过采购人认可的测试，测试结论将作为系统是否达到验收标准的重要依据。2、安装要求提供平台安装、部署、实施服务，安装、调试费用由中标人承担。3、培训要求投标人在投标文件中按照招标文件的要求分别列出系统正常运行、管理和使用所需要的培训，包括但不限于：1）培训的课程；2）培训方式；3）培训次数；4）培训教师安排；5）培训时间安排。培训计划、教材、时间、地点、人员由中标人根据招标人要求提供。培训人数不少于50人，培训费用由中标人承担。培训采用三种培训方式：项目培训（集中授课培训）、实践培训、现场培训。（三）实施与计划投标人应根据招标文件服务需求及服务部分的

44、要求，详细叙述拟提供服务方案情况。投标人提出的本项目服务方案应包括但不限于：投标人应制定详细的项目分步分项的实施方案，包括项目进度计划及保证措施，并提出实施策略、项目管理方案、实施进度、实施范围、项目验收方案、系统测试方案、系统发生故障时的系统应急预案、与相关单位的衔接、技术支持及培训方案、售后服务方案等。（四）项目文档要求中标人应根据项目进展和合同要求，按照系统工程、软件工程方法，按时提供相关文档及技术成果。文档必须满足国家标准、行业标准、建设单位和监理单位的要求。中标人应提交的文档包括但不限于：1、项目管理类：项目计划文档，软件配置管理计划，文档编制规范，软件质量保证计划，项目变更控制文档

45、，项目验收计划，项目总结报告等。2、软件开发类：总体方案规划报告，需求调研计划，需求调研材料，软件需求分析报告，软件概要设计说明书，软件详细设计，项目测试大纲，项目测试报告，软件开发编码规范等。3、组织实施类：系统部署实施计划，部署实施方案等。4、系统管理与维护类：运营手册，运维手册，各类管理员手册，用户操作手册，用户培训手册等。（五）验收要求1、中标人应在项目验收前将项目的全部相关的系统软件，各阶段开发文档，运行稳定可靠的系统及其安装程序，注释清晰明了、保证平台及其他应用系统交互接口功能的源代码和数据表结构，以及有关产品和系统说明书、安装手册、维护手册、技术文件、资料及安装、测试、验收报告等文档汇集成册交付采购人。只有文档齐全后方可组织验收；对整个项目的验收包括检查整个系统是否实现采购人所要求的功能，是否与中标人提出的解决方案中既定目标功能完全一致；2、中标人必须根据项目总体设计方案提出验收细则和验收文档清单（包含需求调研、项目分析、功能设计、整合开发、系统测试、实