数据共享运营和大数据应用项目需求

数据共享运营和大数据应用项目需求一、项目概况本项目总体目标是依托大数据平台及共享平台，通过专业技术人员的支持和协助，使各委办局可以高效通过平台进行数据获取、数据治理和数据共享和对接。完善和巩固市数据治理服务体系，推进各行业、各领域数据的融合应用,为数字建设各项工作开展提供强有力的数据服务支撑。本项目服务内容包含大数据支撑服务、数据共享支撑服务、主题库治理服务和数据对接服务四部分，基于共享平台和大数据平台提供全流程的数据开发、治理和共享基础环境。二、大数据支撑服务（一）大数据平台用户服务支撑基于市大数据平台，为各申请单位、使用单位提供全面的指导。指导内容涵盖平台入驻、帐号权限管理、工具资源申请、数据开发治理和数据编目共享等方面。并针对不同用户需求，提供详细的操作指导和问题解答，确保用户能够充分理解和熟练应用大数据平台。同时根据大数据平台的能力升级情况，编制、优化大数据平台手册。帮助用户更好地利用大数据平台形成业务数据资源的统一管理和统筹调度能力，支撑业务数据资源跨部门、跨层级、跨地区的高效、便捷、安全的共享和应用。1.平台入驻服务支撑为用户单位提供申请入驻大数据平台的全面引导，包括提供入驻申请指南和操作指导，确保用户能够清晰了解入驻流程和要求，并正确填写申请表格、提交必要文件，并了解审核流程，以提高申请入驻的效率和顺利完成入驻申请。2.帐号权限管理服务支撑基于大数据平台用户权限体系和分配原则，指导用户单位了解不同角色的含义和操作权限范围，并结合实际操作演示，帮助管理人员正确配置和管理单位成员在大数据平台的帐号权限。以确保系统的安全性与合规性。3.工具资源申请服务支撑提供详细的大数据工具资源申请流程和操作指导培训，服务内容包括提供工具资源申请流程和操作指导，帮助用户正确填写申请单并解决可能遇到的问题，确保用户单位能够有效地获取所需工具，更好地支持其业务需求和数据分析工作。4.数据开发治理服务支撑为用户单位提供全流程的数据开发治理指导，内容涵盖数据汇聚、治理、开发、分析等环节。以确保用户单位能够规范地进行数据开发工作。5.数据编目共享引导用户单位深入了解大数据平台数据资源编目共享的方式与流程，结合系统演示的方式，对大数据平台的数据编目、数据订阅及大数据平台向一网共享平台分节点上报数据目录操作进行培训。6.数据出湖服务支撑为用户单位提供全面的数据出湖流程操作培训，涵盖了数据出湖授权申请、审批流程、执行过程以及数据搬迁作业的创建等环节。培训内容将通过系统演示的方式，逐一展示每个步骤的具体操作流程，以确保用户能够深入理解并熟练掌握整个数据出湖流程。7.操作手册实时更新根据大数据平台能力升级情况，及时更新和完善平台手册内容，确保用户能够及时了解最新的平台功能和操作指南。（二）用户接入服务应根据各申请单位的需求，提供全面的账号管理和权限配置服务，其中包含用户账号的创建和维护，确保用户能够顺利接入大数据平台并根据其工作职责完成相关任务。1.用户账号创建为申请单位准确创建新的用户账号，确保信息的完整性，同时根据用户的角色和权限要求进行适当的配置，以确保用户能够顺利接入大数据平台。2.用户账号变更根据用户提交的变更申请需求，及时更新用户账号信息，包括手机号码和所在部门等关键信息，以确保账号信息的准确性和及时性，同时提高系统的安全性和管理效率。3.用户账号注销根据用户提交的注销申请，在保障系统业务不受影响的情况下，及时处理用户账号的注销请求。并在完成注销工作后向用户单位进行消息反馈，以确保整个注销流程的顺利完成。4.用户角色配置根据用户的工作职责，对用户帐号进行角色配置，以确保用户在使用大数据平台时能够按照其工作职责顺利完成相关任务。5.用户权限管理管理大数据平台用户权限，包括分配、修改和撤销权限等操作，根据业务的发展和变化，对角色权限进行维护。（三）大数据资源配置服务协助用户单位完成大数据资源的申请、网络开通、审核资源测算报告、以及开通大数据租户等工作。并定期检查租户资源使用率，根据需要与租户沟通确认并进行资源扩容或缩减。同时根据实际情况优化资源申请流程。1.资源申请协助协助用户单位完成大数据资源的申请流程，提供详细的资源申请流程指导，包括填写申请表格、准备必要文件等。并为用户单位提供一对一的支持，解答他们在申请过程中遇到的问题，确保他们能够顺利地完成资源申请流程。2.网络端口开通协助用户单位进行业务网络端口开通申请，确保网络连接畅通，以便用户能够正常访问和使用大数据平台的各项服务。3.资源测算报告检阅对用户单位提交的资源申请测算报告进行检阅，确保测算报告内容的准确性和完整性。4.开通大数据租户根据审核通过的资源申请，及时为用户单位开通相应的大数据租户，并在大数据商城工具发放操作中对工具的关键信息和数据库等进行关联配置，以及对所申请的信息系统进行初始化配置。确保用户单位能够及时获得所需的租户资源，并保障租户的正常运行，为其提供稳定可靠的大数据平台服务支持。5.定期资源检查定期对租户资源的使用情况进行检查和统计分析，形成租户资源使用报表。6.优化资源申请流程关注资源申请流程的执行情况，根据实际情况优化服务流程。提高资源申请效率和租户资源申请服务的满意度，确保资源申请流程的顺利进行，以支持租户的业务发展和创新。（四）数据资源服务发布和申请根据用户需求，为用户单位提供针对数据资源编目共享和用数订阅申请的协助与指导，确保用户单位顺利完成数据资源的编目共享和用数订阅申请流程。针对用户单位的数据入湖与出湖实施工作，提供相应的技术支持和咨询服务。1.数据入湖支持对用户单位的数据入湖工作进行相应的指导与答疑，指导用户单位顺利将所需开发治理的业务数据顺利汇聚至大数据平台数据湖中，协助解决数据入湖操作过程中碰到的问题。2.数据资源编目支持根据用户需求，对用户单位在大数据平台的数据资源编目工作提供必要的协助与指导，指导用户单位完成数据资源的编目工作，确保数据资源得到正确编目和管理，协助解决数据资源编目操作中碰到的问题，确保编目工作的顺利进行。3.分节点上报支持对用户单位使用大数据平台向分节点上报数据目录提供必要的协助与指导，确保数据目录顺利完成上报工作。4.数据订阅申请支持根据用户需求，对用户单位在大数据平台的数据订阅申请工作提供必要的协助与指导，指导用户单位顺利完成数据资源的订阅申请工作。并针对数据资源订阅申请过程中碰到的问题提供必要的支持，确保用户单位能够安全、高效地获取所需数据。5.数据资源编目检阅对用户单位发起的数据资源编目申请进行检阅，确保编目信息的准确性、合规性和完整性，为用户单位提供可靠的数据资源编目检阅支持。6.数据出湖支持协助用户完成出湖授权申请、审核、执行出湖操作以及数据搬迁等步骤，并解答和协调解决出湖过程中出现的问题，以确保数据安全、高效地将数据迁移到目标环境。7.数据服务审核时效跟踪定期检查数据服务审核时效，及时督促审核人员加快审核进度，包含数据资源编目、订阅及出湖申请流程中等待审核时间较长的情况。（五）数据应用服务发布和申请根据用户需求，为用户单位提供针对数据应用服务的协助与指导，确保用户单位顺利完成数据应用的发布和订阅申请流程。1.数据应用发布支持根据用户需求，对用户单位在大数据平台的数据应用发布工作提供必要的协助与指导，指导用户单位完成数据应用的发布工作，协助解决数据应用发布操作中碰到的问题，确保发布工作的顺利进行。2.数据应用订阅支持根据用户需求，对用户单位在大数据平台的数据应用订阅申请工作提供必要的协助与指导，指导用户单位顺利完成数据应用的订阅申请工作。并针对数据应用订阅申请过程中碰到的问题提供必要的支持，确保用户单位能够安全、高效地获取所需数据。（六）大数据工具使用服务面向大数据平台租户进行数据汇聚、治理、开发、开放和分析的全流程大数据工具套件使用支撑，提供大数据工具相关的数据指标统计分析。1.数据汇聚工具使用支撑支撑大数据平台租户将多源异构业务系统的元数据通过统一的采集机制采集到大数据平台统一数据湖中集中管理，对业务数据进行加工整合后，为数据质量管理、数据加工处理和业务应用提供基础能力支持。具体包含以下指导和支持：（1）创建连接支撑租户使用数据汇聚工具进行创建连接操作并进行指导，包括如何打开工具、创建新连接、配置连接属性等，并协助进行连接测试和故障排除，以解决可能出现的连接问题。（2）创建表同步任务支撑租户使用数据汇聚工具创建表同步任务并进行指导，包括创建任务、选择源表和目标表。（3）查看同步任务日志支撑租户使用数据汇聚工具查看同步任务日志，指导租户在任务详情或日志管理页面中找到对应的任务日志选项查看日志。（4）配置定时任务支撑租户使用数据汇聚工具配置定时任务并进行指导，包括执行时间等参数的配置指导。2.数据治理工具使用支撑支撑大数据平台租户使用数据治理工具进行数据治理，包含指导租户创建规则，填写规则的相关信息，包括规则名称、规则类型、规则描述等。3.数据开发工具使用支撑支撑大数据平台租户使用数据开发工具进行数据加工，对作业开发进行指导。具体包含以下指导和支持：（1）创建脚本支撑大数据平台租户使用数据开发工具创建脚本，指导租户如何创建数据加工脚本。（2）创建开发任务支撑大数据平台租户使用数据开发工具创建开发任务，指导租户创建数据加工的开发任务以及设置任务的参数。（3）查看运维概览支撑大数据平台租户使用数据开发工具查看运维概览，指导租户查看运维概况。（4）任务监控支撑大数据平台租户使用数据开发工具进行任务监控，指导租户如何查看单个数据加工任务的监控信息，包括任务的运行情况、执行时间等指标。（5）实例监控支撑大数据平台租户使用数据开发工具进行实例监控，指导租户查看数据加工任务实例的实际执行情况，包括运行状态、开始与结束时间等指标。4.数据开放工具使用支撑支撑大数据平台租户充分使用数据开放工具，将治理的业务数据封装成独立数据接口服务，并发布在大数据平台提供数据接口服务。指导租户创建API并在数据开放工具中配置接口的相关参数，如接口名称、路径、请求方式等。5.数据可视化分析工具使用支撑支撑大数据平台租户使用数据可视化分析工具，将治理的业务数据生成可视化报表，并发布到大数据平台提供数据应用服务。指导租户在数据可视化分析工具中维护数据连接，并使用已配置的数据连接进行数据可视化报表的创建。6.工具集指标统计分析对大数据工具相关的数据指标进行统计分析，包含数据采集任务数、数据开发任务数和数据资源数量等指标，支撑大数据平台运营报告的输出工作。（七）安全运营保障服务基于大数据平台数据安全保障体系进行平台安全运营保障工作，主要包含每日平台巡检、安全漏洞扫描、安全事件监测、重保工作保障和应急演练工作支持。1.每日巡检每日对平台进行巡检，检查系统运行状态，发现问题后联系对应系统运维厂商复核并跟踪问题处理解决情况，确保系统运行正常。2.安全漏洞扫描每月通过数据安全管控平台进行平台安全漏洞扫描，对于扫描出来的安全漏洞，联系相关人员进行复核，如果是误报则修改相应的检测策略，如果存在安全漏洞，联系相关人员进行安全漏洞修复。3.安全事件监测通过数据安全管控平台监测平台安全事件，对于产生告警的安全事件，联系相关人员进行复核与处理。4.重保工作保障在重保期，针对网络安全、数据安全做好安全防护，加强网络安全管理核实，做好各系统7*24小时应急处置和值班值守。5.应急演练工作支持根据平台已发布的应急预案，协助管理人员开展应急演练相关工作，检验应急预案的合理性、应急保障队伍及相关人员的专业性，以及管理组织的有效性。当发生应急事件，和相关人员共同输出事件处置报告。（八）大数据平台在线咨询提供全天候的在线咨询，随时解答大数据平台用户提出的使用问题。定期回访用户，收集用户的使用需求和整理他们的使用反馈意见。1.提供全天候咨询服务提供全天候的在线咨询服务，确保用户随时可以获得帮助，即时回答用户对大数据平台的使用问题，确保用户在遇到困难时能够迅速得到解决。2.定期回访平台用户定期对平台用户进行回访，对用户提出的功能需求和使用反馈进行收集、归类和整理，对平台优化提供支撑。（九）大数据平台服务报告提供大数据平台服务报告，每日、每周和每月对平台运行情况进行统计分析，根据统计分析结果输出相应的日报、周报和月度报告。三、数据共享支撑服务（一）数据供需管理服务需求确认对需求方的数据需求进行合理性确认，确认信息包括需求名称、关联系统、业务用途、预期应用成效、需求资源类型、核心字段、时效要求、联系人等。需求评估对需求方的数据需求进行分析，确认数据资源情况，对尚未发布的数据资源，由数据运营服务人员定位数源提供方，确认数据资源是否可共享，数据资源共享需要的条件等。数据挂接数据需求资源确认可共享后，由数据运营服务人员协助数源提供方在市业务信息资源共享平台上进行编目挂接，提供技术指导。审核数据资源的数据指标、更新频率、联系人等关键信息，确保数据与需求相符，保证数据资源完整、可用，完成需求数据资源的共享。数据信息确认需求数据资源发布后，由运营服务人员对需求方提出的数据交换申请审核进行监督，督促数源提供方尽快审核数据交换申请。对于拒不审核或逾期审核的交换申请进行记录。（二）资源目录维护服务资源目录审核服务根据数据资源目录编目指南，通过人工审核的方式对资源目录的发布、变更、取消发布环节进行全流程的管理。资源目录标签管理服务判别现有标签分配的合理性，针对标签分配不合理的资源目录与提供部门进行沟通确认，并创建符合市业务信息资源分类的标签并进行标签管理。资源目录优化服务依据数据资源目录编目规范，对已发布的资源目录进行定期的审查工作，对于信息项缺失、填写不规范的目录督促提供部门进行整改，对于新增的元数据项提醒部门通过目录变更进行填写。资源目录治理服务针对平台资源目录管理目录导航板块的基础库、主题库目录，将与基础库、主题库相对应的数据资源划分进相应的目录，促进基础库、主题库的统一完善。（三）数据质量管理服务对市业务信息资源共享平台发布的数据资源目录进行质量管理，包含了数据质量核验服务、数据处理跟踪环节。数据质量核验服务运营服务人员以季度为单位对增量的数据资源目录进行质量核验，统计分析质检情况，以保证共享数据的完整性、准确性、一致性。数据处理跟踪运营服务人员发现共享数据的质量问题后，通知数据提供方对数据质量问题进行确认和质量处理，在完成质量处理后重新进行数据资源挂接。通过数据质量管理环节对共享数据的质量把关，保证数据的质量。（四）平台故障跟踪服务运营服务人员对平台故障应提供收集、反馈、跟进处置结果、分析、评估等服务。运营方在服务周期内，对平台的运行情况进行及时追踪，收到用户单位报障或平台发生故障时，快速将故障问题反馈至运维团队，并对故障发生时间、起因、类型、处理过程、解决方法、造成的影响等进行详细记录和分析。（五）数据共享绩效监督评估服务优化绩效考核数据采集方案协助甲方开展数字建设绩效考核中的数据共享考核工作，优化绩效考核数据采集方案，并进行相关数据采集工作。评估数据采集与初步评估按照绩效考核数据采集方案指标进行数据采集和初步统计，出具绩效考核初步评估文档，并对被考核单位提出的申诉或质疑进行复核。（六）专项数据服务完成数据需求方提出专项数据的共享支撑需求，运营服务人员根据需求清单在市业务信息资源共享平台上查找相应的数据资源信息。对已有数据，直接提供数据服务。对缺失数据，分析与判别数据提供方，沟通与协调数据提供方按要求提供所需数据并进行编目发布，对于不可共享的数据需要记录并反馈无法提供的详细原因。（七）国家及省级平台数据支撑服务国家及省平台数据共享需求对接对国家级、省级数据进行相关数据需求的日常协助工作，整理与分析各委办局对国家、省级数据的共享需求，通过跨平台之间的协调对接机制，与国家、省级相关单位进行沟通、协调工作，及时将对接相关结果信息反馈至各委办局，最终完成市级平台和国家、省级平台之间的数据共享，提升数据利用效率和调度能力。国家及省平台数据资源目录梳理协助各部门单位根据省政数部门的要求，对共享平台上的目录进行梳理，补充和完善相关信息项。（八）数据共享案例集对市业务信息资源共享平台应用情况及全市数据共享工作成效进行统计汇总，整理形成案例集。以年度为周期，对周期内全市数据共享工作取得的成效、工作的亮点进行总结和展示，将年度内支撑的业务服务事项，如秒批秒办、营商环境等进行分类汇总，形成业务数据针对相关领域、部门的共享服务案例集，体现市业务信息资源共享平台数据应用创新工作成效。（九）数据使用情况跟踪服务定期针对部门单位数据资源共享交换情况的跟踪，记录、跟踪数据的应用场景和调用情况等内容，收集汇总相关数据共享交换问题，提升数据使用效率。（十）运营数据支撑服务支撑平台管理方开展运营数据的日常梳理统计工作，确保运营数据及时上报汇总，检查分析平台运营数据的统计逻辑和统计口径的合理准确性等工作，提升数据统计准确性。（十一）数据安全辅助服务数据安全日常工作支撑日常辅助平台管理方编写数据安全相关文档报告，协助完善安全流程，在省、网络安全演练期间，协助管理人员开展安全演练相关工作。数据安全问题跟踪根据现有安全制度，跟进安全抽查任务，针对数据安全方面问题进行跟踪，督促运维方进行相关问题整改及优化工作。协助数据安全方面内容的日常巡检。（十二）省一网共享分节点数据迁移服务数据迁移实施配合省一网共享分节点进行数据迁移测试和数据质检相关工作，对质检合格的数据上架分节点门户并同步至省一网共享平台。若质检不合格，将联系单位负责人对数据进行查漏补缺。协助省一网共享分结点分批次迁移数据。按照数据量和使用频次等指标对现有数据和用户分类，包括现有数据、前置库和订阅关系。数据迁移监督考虑数据迁移过程中会出现的风险，协助分节点制定对应的风险应对计划与应急预案，保障用户数据交换业务不受影响。四、主题数据库治理服务围绕“互联网+监管主题库”、“征信主题库”开展资源目录梳理、数据申请、数据清洗治理、数据汇聚、目录发布、数据上报、目录巡检、目录维护等相关工作。（一）资源目录梳理根据建设主题库所需的数据资源，包括数据目录名称、字段名、数据项、更新周期等，形成相关资源目录清单，协助相关单位开展目录编制工作。（二）数据申请在市共享平台或省“一网共享”平台分节点上协助申请已梳理的主题库相关数据资源目录。（三）数据清洗治理依托大数据平台，根据国家、行业和地方相关标准配置主题相关的清洗规则，对已申请的目录数据进行数据清洗治理。若单位的目录不符合清洗规则，需联系单位进行目录整改，整改完成后重新进行清洗治理流程。（四）数据汇聚将清洗后的数据融合汇聚，形成相关主题库资源目录，并同步到大数据资源管理中心数据库。（五）主题库目录发布将完成清洗治理的相关主题库资源目录编目挂接至省“一网共享”平台，配合平台运营人员完成目录信息填写、目录质检等工作，确保目录发布上线。（六）目录巡检查看各单位在市共享平台或省“一网共享”平台分节点挂接的数据资源目录是否存在数据更新、数据报错等情况。如有更新数据，通过定时任务及时采集，并重新清洗汇聚后更新至省“一网共享”平台。如数据出现报错等问题，根据实际情况分析，并分类分级处理。（七）目录维护依据省“一网共享”平台数据资源目录编目规范，对已发布的相关主题库数据资源目录进行定期的审查工作，如出现目录未按规定时间更新数据或数据项需更新、删除、修改等情况，根据实际情况分析处理，保证目录源数据的完整性和准确性。五、国家、省级政策数据上报服务（一）公共信用基础库数据上报服务1.目录上报将归集的部分公共数据基础库目录信息上线至省“一网共享”平台。2.目录巡检每日巡检，查看在省“一网共享”平台分节点挂接的公共信用基础库数据资源目录是否按时更新或数据流转过程是否出现异常。如未及时更新或数据流转过程中出现异常，根据实际情况具体分析，分类分级处理。3.目录维护依据省“一网共享”平台数据资源目录编目规范，对已发布的公共信用基础库数据资源目录进行定期的审查工作，如出现目录未按规定时间更新数据或数据项需更新、删除、修改等情况，根据实际情况分析处理，保证目录源数据的完整性和准确性，确保目录可供共享使用。（二）国家、省级平台数据对接服务协助完成国家、省级数据共享对接工作，整理与分析各委办局对国家、省级数据的共享需求，通过跨平台之间的协调对接机制，与国家、省级相关单位进行沟通、协调工作，及时将对接相关结果信息反馈至各委办局，最终完成市级平台和国家、省级平台之间的数据共享，提升数据利用效率和调度能力。1.部门数据共享对接协助各单位在省“一网共享”平台上申请使用已发布的《部门数据共享责任清单》的数据资源。2.部门数据共享需求上报为推动部门数据共享，配合国家做好新一批《部门数据共享责任清单》的编制工作，收集和梳理各单位对除已发布的国家部委数据共享需求，上报省业务服务数据管理局。3.国家接口申请对接定时审查发布到省“一网共享”平台分节点的国家数据接口。若出现接口对接报错或单位申请接口失败等情况，协助分析问题并解决。收集汇总各单位申请国家接口失败或被驳回的原因，跟踪分析并形成相应的接口调用工作指引，以提升国家接口申请成功率。4.省级平台数据共享对接协助各单位在省“一网共享”平台上申请使用已发布的《省级部门数据共享责任清单》的数据资源。5.国家、省级数据巡检服务每日巡检，巡检内容包括关联业务办理项、数据目录系统、用数订单申请审核时效、接口调用时效等，若单位存在巡检不合格的情况，督促单位进行相关问题的整改及优化工作，协助完成省数字建设改革建设常态化指标考核提升工作。（三）人员要求1.服务人数要求：本项目需包含1名项目负责人和不少于28人的团队成员开展本项目专职服务，其中应包含数据共享支撑服务8人，大数据支撑服务15人，主题数据库治理服务2人，国家、省级政策数据上报服务3人。2.项目团队成员（含项目负责人）均需具有本科或以上学历。3.投标人须承诺中标后不得随意更换项目负责人和团队成员，如遇特殊情况确需更换项目负责人和团队成员，需提前一个月向采购人提出书面申请（需明确更换的人员名单，替换人员需具备不低于被替换人员的资质和素质），经采购人同意后，方可更换。4.采购人根据中标方团队成员的工作表现，可要求中标方更换团队成员，直至采购人满意为止，采购人提出更换团队成员要求，中标方需无条件在一个月内完成更换，采购人按月度对团队成员进行服务评价。（四）服务及成果要求1.项目团队成员应提供7×24小时的电话响应服务和7×24小时不间断技术支持。2.按自然月、季度、年度提供数据服务报告：包括但