云平台及大数据平台运维服务项目需求

云平台及大数据平台运维服务项目需求一、项目概况1.大数据平台大数据平台项目建设内容包括统一身份认证系统、报表服务系统、数据开放系统、OCR智能服务组件、综合采集系统、数据分布式存储与计算系统、统一移动接入平台、基础库管理系统、数据账户管理系统、数据质量管控系统、主题数据资源管理系统，GIS系统共计12个子系统。统一认证身份认证系统提供覆盖全网的、统一的用户信息管理、身份认证管理和访问控制授权管理综合解决方案。采用集中统一的用户管理模式，搭建一个多应用系统的统一认证和授权管理平台，集中展示应用系统资源信息，实现用户的一点登录、多点漫游，建立完善的操作审计管理机制。统一身份认证系统作为智慧某某应用系统的统一入口，为各业务系统提供统一的身份认证和综合安全服务，并将某某区工作人员的信息及账号统一管理，解决了用户需要记住多个系统访问地址，用户名、口令，需要多次登录不同的系统访问的问题，保障各系统用户信息的统一性，实现对用户账号的集中监控和统一审计，实现操作合规性。报表服务系统提供一套向导式的、图形化的、模板化的自助式智能分析工具，业务人员能够自行进行报表分析和数据挖掘等工作，为全区各委办局系统提供相关大数据分析结果的数据服务支撑。数据开放系统主要包括数据资源管理、数据服务管理、应用管理、元数据资源目录管理、系统管理等模块，主要提供数据开放相关功能。OCR智能服务组件主要提供身份证、营业执照、事业单位法人证书等共计13类文档的OCR识别服务。数据综合采集系统为大数据平台其它系统提供数据基础和数据保障，包含任务设计、任务执行、数据源适配、系统管理、数据手工采集、网络爬虫子系统，实现结构化数据、非结构化数据、半结构化数据的采集，通过网络爬虫系统满足各局办对需要的互联网爬取的共性需求。数据分布式存储与计算系统通过分布式协作计算、语义化运算任务描述及任务管理和监控，从现有数据中挖掘有价值的信息，为领导决策支持提供大数据计算支撑。目前包括Hadoop架构的HDFS文件存储子系统、HBASE数据库子系统和MapReduce分布式计算子系统的软件部署，并为物联网数据接入提供大数据服务支撑。统一移动接入平台从移动设备身份安全管理、移动终端管理、应用安全管理、数据安全、协同办公安全等方面，提供完善的安全方案及管理体系，实现对移动端对应用系统访问过程中的可控、可信的安全访问,同时满足信息安全等级保护的要求。基础库管理系统实现对基础数据资源的展示、查询，并通过数据溯源，了解人口库、法人库数据的原始来源。数据账户管理系统主要包括企业账户和个人账户，其中个人账户主要负责对本项目建设的基于个人应用提供访问的入口和内部各个系统的应用集成，对个人数据账户的后台提供内容管理；企业账户主要负责对本项目建设的基于企业应用提供访问的入口和内部各个系统的应用集成，对企业数据账户的后台提供内容管理。数据质量管控系统，实现对入库数据的质量规范化管理和持续的数据质量提升，系统包含数据稽查、数据质量监控模块。主题数据资源管理系统实现全区各委办局、各辖区的业务综合数据的汇聚及共享，包含主题管理、数据管理、应用服务、数据分析和系统配置管理等模块。满足业务对统一数据资源利用需要，进而提升形势分析预测水平，对在发展规划、投资布局、资源环境、管理创新、科学决策等业务提供强有力支持。GIS系统利用地理信息系统、摄影测量与遥感、移动互联网、云计算等技术，建设统一的实景三维时空信息云平台数据库和统一的实景三维时空信息云平台，实现统一的地图平台、统一的地图接口、统一的地图工具、统一的地图服务。实现对平台各类服务资源和功能的调用，供各委办局开发各类业务应用系统。2.云计算服务平台参照国际、国内智慧城市云数据中心的相关经验，在某某数据中心和区数据中心的基础上，结合“智慧某某”的计算、存储、网络、安全需求，建设智慧某某云数据中心，打造泛在、弹性的“云上某某”，提升硬件设备集约化建设的效率、提升业务资源的利用率，并且缩短业务系统的上线时间，为某某区的建设发展提供有力的IT基础设施保障。二、服务需求明细序号采购计划编号服务需求名称数量单位分项预算金额（元）1大数据平台运维1项2云计算平台运维1项三、技术要求大数据平台：为大数据平台提供日常运维服务，保障相应系统及相关工作的正常开展；云平台：为相关服务器、存储设备、支撑软件等提供日常运维服务，保障相关工作的正常开展。1.运维服务范围（一）大数据平台运维对某某区大数据平台现有系统提供持续稳定的维护，实现对现有的统一身份认证系统、报表服务系统、数据开放系统、OCR智能服务组件、综合采集系统、数据分布式存储与计算系统、统一移动接入平台、基础库管理系统、数据账户管理系统、数据质量管控系统、主题数据资源管理系统，GIS系统提供运维管理服务，保障相应系统的正常运行。（二）云计算服务平台运维对某某区业务云计算服务平台的硬件设备和软件平台进行运维服务，包括但不限于服务器、存储、软件、数据库、操作系统及其他配套设备等；根据相关要求对云资源池系统以及其中的各类资源进行集中管理，统一调度云资源池内业务所需的各类的资源，包括计算资源、存储资源、网络资源等；对某某区业务云计算服务平台进行服务器、存储等资源实施扩容；梳理某某区业务云计算服务平台各虚拟机、业务系统的资源使用情况，定期向采购方汇报及对各虚拟机资源进行弹性调配；对某某区业务云计算服务平台软件、数据库、操作系统等进行版本升级;响应采购方关于云计算服务平台的各项需求，配合各业务系统建设方做好各系统的打补丁以及版本升级工作，配合有关某某区业务云计算服务平台的硬件增减、调试等工作；定期对项目涉及的所有软硬件资产进行盘点，并形成台账。2.运维服务内容（一）大数据平台运维1.系统巡检及监控：每日巡检大数据平台各业务系统的资源使用情况、系统运行情况，及时发现并处理系统问题，保证系统正常运行，填写运维报告，包括但不限于周报、月报、季报及年报。巡检过程中未发现问题而造成的重大故障，未及时预警，出现的责任与损失由承担。定期查看系统日志，检查是否有运行错误；定期检查磁盘空间、内存使用情况、CPU使用情况并维护；定期检查数据库的基本情况；查看数据库连接是否正常；定期检查系统的页面情况；查看页面内容是否正常展示、功能是否能正常使用。2.系统服务及故障修复：维护大数据平台各业务系统的100余台虚拟机，包括：操作系统、数据库打补丁等日常维护；服务器资源申请及部署，根据需要扩容；服务器操作系统的安装、升级，性能调优等；数据库备份等相关工作，并根据需要开展备份恢复演练；修复系统安全漏洞，保障系统安全可靠运行，配合安全部门完成安全基线扫描及整改等安全工作；根据相关要求配合完成大数据平台相关系统的等级保护测评整改工作至通过等保测评、取得《信息安全等级保护测评报告》。3.系统及数据对接：按区有关规定，配合有关单位将系统接入统一移动接入平台、统一身份认证系统；将有关系统业务数据进行编目后接入主题数据资源管理系统；对外提供数据共享服务，保证相关服务的稳定运行，根据需要开展性能调优等工作；及时解决系统对接、数据对接中存在的问题；基于某某区现有数据资源，从满足某某区现在及未来数据应用需求出发，对数据需求及来源进行分析，并分析借鉴其他同类区域的数据应用经验，按需从省数据资源“一网共享”平台、市业务信息资源共享平台等相关数据平台申请订阅数据资源，并接入主题数据资源管理系统；按照一定数据规范，梳理、维护、管理数据汇聚清单；按需协助各委办局将在省数据资源“一网共享”平台、市业务信息资源共享平台等相关数据平台发布的数据资源推送至相应前置机，并按要求做好数据更新等工作；以及满足招标方有关系统及数据对接需求。4.系统维护：（1）维护主题数据资源管理系统，维护某某区数据资源目录，规范接入数据部门系统名称，按照国家、省、市关于业务信息资源目录编制等相关技术性文件要求，规范存量资源目录，遵循规范编制新增数据资源目录，对重复接入数据进行合并删除；完善市共享平台接口接入功能；推进重点数据国密算法加密存储；定期清理运维过程中产生的临时表；优化数据库，如通过索引、优化存储、分表存储等方式提高系统运行速度；对接市区各委办局业务系统数据，进行数据编目、接入、清洗等数据处理工作，处理数据接入问题；针对各委办局数据需求，定制化开发数据接口对外提供数据，做好接口运维管理，保障接口正常访问，并做好接口调用监测；梳理数据接入共享情况，从数据接入情况、更新频率、数据共享情况、接口调用情况等方面出发，提交数据运维报告。（2）维护综合采集系统，实现数据抽取前端化、ETL数据抽取加密化和解密化，对ETL工具进行扩容，提高数据抽取服务能力，定期巡检并维护数据调度任务，及时处理各类数据抽取告警。（3）维护数据账户管理系统，保障系统可靠可用，各项功能正常使用，及时处理有关对接问题。（4）维护基础库管理系统，梳理人口、法人模型，对数据源准确性、权威性和及时性进行检查；按照国家、省、市相关标准规范等技术性文件要求，结合市和其他区的基础库数据模型设计，根据数据源扩展情况以及实施应用需求情况，对模型进行必要变更，完善人口、法人等基础数据模型；通过身份证号码、统一社会信用代码对比关联入库的基础业务数据，扩展补充信息，完善人口、法人基础数据；完成各业务部门在履职过程中产生的基础业务数据现有存量以及新增信息资源项的入库工作，补充数据源字段，并做好更新维护，提供准确及时的人口、法人数据；按需对归集的数据提供数据清洗、融合、治理服务，完善基础库，提升数据质量，提供有关模型监测报告。（5）维护统一身份认证系统，完善统一门户登录，对外提供统一身份认证接入服务，及时处理有关对接问题，推进国产化适配。（6）维护统一移动接入平台，对外提供统一移动接入服务，完善某某区综合办公平台单点登录功能，及时处理有关对接问题，推进国产化适配。（7）维护GIS平台，对外提供接口服务，按需做好数据更新，及时处理有关对接问题。（8）维护数据分布式计算和存储系统，辅助接入接口数据，按需配合做好数据接入，维护已接入数据的正常更新，及时处理有关对接问题。（9）维护报表服务系统，对外提供并维护有关数据服务，根据需要完成数据建模和管理维护，及时处理有关对接问题。（10）维护数据质量管理系统，保障系统各项功能正常使用，及时处理有关对接问题。（11）维护数据开放系统，保障系统各项功能正常使用，及时处理有关对接问题。（12）维护系统，提供正版SSL证书，使所有系统对外提供https访问页面。（13）依据实际需要完成系统迁移、切换、扩容、缩容等有关工作。5.系统必要的升级改造。6.需根据服务内容需要提供数据抽取工具、数据下发工具等运维工具。7.其余招标方要求完成的工作。（二）云计算服务平台运维对区统建的云计算服务平台进行日常运行维护，包括但不限于存储设备9套，服务器125台，NDP备份系统1套，FusionSphere虚拟化软件1套。2.3运维服务要求服务方必须严格遵守相关规章制度、操作规范、信息安全制度等要求，接受采购方对本项目所做的项目管理、监督工作。（一）大数据平台运维1.项目人员要求至少安排5名具有1年以上运维经验的专用人员提供驻场服务,所派人员须本科及以上学历，按照招标方要求开展日常运维服务。（1）需提供所派人员的简历及相关证明文件，驻场人员需熟悉操作系统、数据库等系统及软件的基本操作，能独立完成基础设施设备的软硬件安装、配置、调试、漏洞修复等维护工作，对常见故障问题能在1-2小时内自主分析和解决，拥有良好服务意识及协助精神。具体人员需求如下：1.1）负责各子系统的运维人员需具备类似系统的运维经验，熟悉操作系统、数据库相关知识，掌握至少一门计算机程序设计语言，能够独立完成对应系统的系统漏洞修复、常见故障排查、系统部署等工作，有责任心，服从安排。1.2）负责主题数据资源管理系统的运维人员还需具备API接口接入能力，熟练掌握Oracle、达梦、崖山等常见数据库的操作，掌握数据库同Java、Python的交互。1.3）负责数据分布式存储与计算系统的运维人员还需熟练掌握Hadoop、mapreduce、kafka相关知识，具备API接口数据接入能力。1.4）负责基础库管理系统的运维人员需熟悉基础库建模、归集、梳理、完善等流程和要求，具备业务基础库数据模型的完善和维护相关工作经验，具备基础库数据模型设计能力。1.5）各系统运维人员需在1个月内熟悉所负责系统的基本操作，包括系统部署、系统对接、漏洞修复、常见故障排查等。（2）驻场人员场地费用、差旅、培训、考试、食宿费用及工作设备、耗材、办公用品等费用由自行负责，同时需为每位驻场运维人员提供台式机一台，接受招标单位管理，用于运维工作，待运维期结束脱敏之后再交给中标单位。（3）必须在项目中标后3个工作日内安排备选人员到驻场地点参加面试，面试合格后方进行运维工作。本项目驻场服务地点为招标方指定地点，驻场人员须按照招标方要求开展各项驻场服务。（4）自正式工作之日起，驻场人员试用期2个月。试用到期后，招标方根据其在试用期内综合表现决定其去留。如试用合格人员人数不足，应在5个工作日内再次安排备选运营人员到驻场地点参加面试。招标方将对驻场人员进行不定期考核，如连续2次考核不合格，招标方有权要求在7个工作日内更换驻场人员，更换的驻场人员经招标方面试合格后进入驻场运维。（5）需保证驻场运维人员的稳定性，因故发生变更时，须提前2周告知招标方（如需调整运维项目经理，需提前1个月告知招标方），经招标方同意后方可变更，如小组成员离职的，应在离职之日起三个工作日内向招标方出具离职证明文件，须在离职前7日内补充合格驻场人员并做好相关工作交接。（6）驻场运维人员应严格遵守招标方的工作时间，服从招标方管理人员的安排，爱护有关设施，不得随意损坏，严格遵守招标方的规章制度和保密制度，工作期间不得从事其它无关的工作。节假日、特殊时期，应安排人员值班，做好保障工作。遇有成员请假应按招标方相关制度规定报批，同时应安排能力相当且经招标方认可的人员进行顶班。（7）运维过程中驻场人员产生伤残医疗、个人安全等问题，须全部由按照相关法律法规负责，并办理相关手续。2.服务要求（1）工作时段提供5×9小时服务，非工作时段提供7×24小时的报障受理，在节假日、自然灾害等紧急事件保障期及招标方指定的重要时期提供全天（24小时）驻场或远程支持服务。（2）应提供及时的故障修复支持，在接到招标方电话、短信及电子邮件通知后，在30分钟内提出应对措施，并安排相关技术人员到达现场处理问题；通过其他渠道得知的故障报修和技术支持需求，需在第一时间告知招标方，并组织技术人员分析故障原因、解决对应故障。统一身份认证系统、统一移动接入平台、GIS、主题数据资源管理系统要求故障发生后30分钟内运维人员需到场恢复相应服务，其余系统要求在故障发生后6小时内解决相应故障。故障处理完成后3个工作日内，提供《故障分析报告》和《故障处理报告》，详细说明故障原因、处理过程、解决办法、预防措施等内容提交给招标方备案。系统恢复正常后，工程师应对系统进行持续跟踪，避免遗留问题。（3）故障修复之前工程师须进行必要的系统及数据的备份，做好回退方案。（4）承担运维服务的单位要配合招标单位开展工作，对招标单位提出的技术要求和问题要进行耐心、认真的解答和处理。（5）应根据招标方要求按期提交运维服务报告，服务报告应包含日常工作记录及处理情况、巡检报告等内容。（二）云计算服务平台运维1.驻场服务（1）服务要求：服务方应至少安排2名专业技术人员提供5*8小时驻场服务。在节假日、自然灾害等紧急事件保障期及采购方指定的重要时期提供全天（24小时）驻场服务。（2）人员要求：服务方需提供所派人员的简历及相关证明文件，所派人员须专科及以上学历，具备相应计算机基础操作能力，能独立完成基础设施设备的软硬件安装、配置、调试等维护工作，对常见故障问题能在1-2小时内自主分析和解决，拥有良好服务意识及协助精神。2.备件管理及使用（1）备件管理：服务方需提供不少于1套备件并定期进行使用测试。备件需放置在采购方指定位置以备调用。（2）备件使用：对于需进行硬件修复的故障，双方协商后提出故障修复方案，立即启用备件，并在2个工作日内修复损坏配件。超期不能修复的，须更换同一品牌及型号的新配件，并提交修复时间计划由采购方审核，采购方审核同意的可以适当延长修复时间。3.故障响应及恢复（1）响应要求：服务方须提供7*24全天候热线支持故障报修或技术支持，在接到采购方的电话、短信及电子邮件通知后，服务方须立即组织技术人员分析故障原因。服务方通过其他渠道得知的故障报修和技术支持需求，需在第一时间告知采购方，及时组织技术人员分析故障原因。（2）响应时间：服务方在收到故障报修和技术支持需求后应立即做出响应，在30分钟内提出应对措施，并安排相关技术人员到达现场。（3）故障类别：故障分为软件故障和硬件故障。如果是软件故障，服务方工程师将对软件进行修复，包括软件重新安装、更新软件版本、更新补丁等；故障修复之前工程师须进行必要的系统及数据的备份。如果是需进行硬件修复的故障，故障器件的维修、更换、安装、调试均由服务方负责，同时在双方协商后进入备件使用程序。（4）故障和技术支持处理：一般性技术支持需求，服务方在告知采购方后可自行处理，并做好记录和处理结果反馈。对于造成系统性能不足、运行效率下降的一般故障，服务方应立即响应，分析故障产生原因并在1-2小时内排除故障，然后及时将处理结果反馈给采购方。对于造成系统无法正常运行达半小时（含）以上、对业务运作造成不良影响的较大故障，服务方应立即响应，以优先恢复业务系统作为故障处理的首要原则，积极分析故障产生原因并在6小时内排除故障，然后及时将处理结果反馈给采购方。对于造成系统无法正常运行达3小时（含）以上、对业务运作造成重大影响的重大故障，服务方服务方应以优先恢复业务系统作