政务大数据资源平台建设解决方案

政务大数据与资源平台建设解决方案01建设背景与需求分析02整体建设规划方案03大数据能力平台建设方案04资源中心与数据应用建设方案建设背景与需求分析 政务大数据已成为智慧城市建设的必要基础政务大数据平台建设的必要性政务大数据平台建设的必要性智慧城市+智慧政府科学管理精准调控高效协同服务民生拉动产业孵化创新 建设政务大数据是构建智慧城市大脑的重要组成部分通过大数据平台建设、推动政府数字化转型通过大数据平台建设、推动政府数字化转型数据共享协同城市精准治理政府高效运行✓公共数据共享✓数据服务开放✓社会数据协同赋能数字经济✓提升运行效能✓推动数字经济✓促进产业发展纵向联动……市级单位区级单位社会企业 纵向联动……市级单位区级单位社会企业 全域数据汇聚，推动政务业务的数据协同促进数据联动协同促进数据联动协同•形成统一的跨部门、跨地域、跨层级横向协同构建数据支持体系构建数据支持体系•逐步实现立体化、多层次、全方位的数据服务体系•有效支持电子政务公共服务能力提升住建委人社税务局•人户核实•户口迁转•社保年限••社保年限•缴纳金额•税收缴纳•婚姻状况•房产评估房产局房产交易所•购房资格审核•交易手续确认•购房能力评估政务大数据平台政务大数据平台社保数据交通数据金融数据社会安防公共服务环保数据算法算力存储…… 社保数据交通数据金融数据社会安防公共服务环保数据算法算力存储…… 多维数据分析，精准支撑社会服务与管理城市城市RK分析规划.RK迁移分析.人群特征分析.人群发展预测公共安全分析预测.建筑安全评估.人流分析预警生态环境分析研判.大气污染分析.水质资源分析.……消防部门•救护车资源调拨•急救医护资源调拨政务大数据平台事件感知&实时处理 消防部门•救护车资源调拨•急救医护资源调拨政务大数据平台事件感知&实时处理 深入数据洞察，辅助城市治理高效运行实时感知策略研判实时传递协同处置一@)一)一)•消防接警•消防出警市急救中心市公安市急救中心•事故路段增派人手•沿途路线道路疏通物业单位•疏散建筑人群物业单位•疏散建筑人群•检查应急通道•短信通知涉事区域人员•实时监控区域人流个人信用评级社会数据个人征信数据金融机构小型金融机构个人信用评估出行数据公共数据延误旅客数据航空公司保险公司航班延误险定价 个人信用评级社会数据个人征信数据金融机构小型金融机构个人信用评估出行数据公共数据延误旅客数据航空公司保险公司航班延误险定价 智能数据服务，促进产业经济发展公共—社会数据相互促进公共—社会数据相互促进政务大数据平台市级数据库政务大数据平台市级数据库空间地理库个人征信数据延误旅客数据 平台建设现状分析省级数据共享交换平台（大数据资源平台）省级数据共享交换平台（大数据资源平台）数据共享交换数据共享交换数据共享门户数据共享交换系统大数据存储与计算数据共享交换平台目录管理系统电子证照库市政云市政云存储存储不不足Ø数据资源管理缺乏规划Ø数据治理能力急待加强Ø数据处理与应用存在技术壁垒Ø安全管控能力有待提升Ø管理维护难度高成本大整体建设规划方案政务大数据体系AI服务整合数据能力赋能智慧运营 数据治理管理 政务大数据体系AI服务整合数据能力赋能智慧运营 数据治理管理 某市政务大数据建设体系规划逐步实现数据能力规模发展逐步实现数据能力规模发展围绕智慧城市建设提供全链路服务3服务赋能2技术驱动1数据汇聚搭建政务大数据能力中台，与行业先进技术保持同步演进；打造城市政务大数据运营、智能应用等数字孪生技政务服务保障公共安全社会治理各级政务数据物联设备数据行业数据互联网数据… 政务服务保障公共安全社会治理各级政务数据物联设备数据行业数据互联网数据… 平台定位与价值规划经济经济发展数据统计、业务分析、风险预警、智能服务、辅助决策&兑现数据价值、赋能政务处理、提升治理水平数据统计、业务分析、风险预警、智能服务、辅助决策&兑现数据价值、赋能政务处理、提升治理水平、推动社会发展智慧城市城市大脑数据计算数据检索决策依据洞察&建议数据计算数据检索决策依据构建构建PB级大数据采集、存储、计算、处理、挖掘、分析与应用能力某市政务大数据资源平台公共事业数据公共事业数据 项目建设目标使能高效协同，全面优化数据动态更新与同步机制驱动数据应用，进一步完善政务大数据基础、主题库建设聚焦服务赋能，初步构建数据中台能力体系加强数据运营，推动全市数据统一标准化管理及运维确保安全可控，完善数据安全和平台安全管控安全管理平台GIS能力平台数据治理平台基于现有平台框架数据可视化平台统一运维平台AI能力平台智慧旅游建筑工地管理安全管理平台GIS能力平台数据治理平台基于现有平台框架数据可视化平台统一运维平台AI能力平台智慧旅游建筑工地管理城市路政治理社会安全治理城市交通治理市场监管智慧农业可视化运营指挥大屏建立主题库全民健康 项目建设内容构建市政构建市政务大数据应用服务体系完善大数据平台能力建立市级大数据资源池构建政务大数据赋能应用建立基础库建立市级数据湖运营指挥大屏数据治理AI能力GIS能力（自然人/FR)画像一次办好社会治理 运营指挥大屏数据治理AI能力GIS能力（自然人/FR)画像一次办好社会治理 总体解决方案规划数据应用与推送智慧城市智慧城市计算任务调度模型设计功能模型设计功能设计数据共享门户数据应用数据整合应用发布需求分析数据汇聚数据汇聚存储计算存储计算主专题库主专题库某市政务大数据资源平台数据分析数据分析AI数据安全数据安全连接各类人员整合各类数据资源连接各类人员某市政务大数据能与资源平台信息安全保障体系技术标准体系规范数据安全管理平台某市政务大数据能与资源平台信息安全保障体系技术标准体系规范数据安全管理平台GIS基础能力平台区块链平台数据可视化平台 平台建设方案规划省级数据共享交换平台（大数据资源平台）省级数据共享交换平台（大数据资源平台）指挥运营中心·可视化指挥大屏大数据应用与共享门户AI能力平台数据目录系统数据治理平台大数据资源中心大数据共享交换平台大数据基础支撑平台（底座）市级政务云市级政务云数据安全保障数据治理处理管理标签库集中监控维护数据安全保障数据治理处理管理标签库集中监控维护 数据资源中心建设规划通过汇聚全市内各单位公共数据形成市级数据湖，同时经过数据清洗、转换、融合、治理后高质量的公共数据资源库，并基于相关应用需求构建各类应用基础、主题、专题、标签等数据库各类数据使用单位与应用各类数据使用单位与应用共享库（开放共享区）共享库（开放共享区）主题库数据库（DWD层）数据湖（ODS贴源层）融合应用库基础库各类数据源各类数据源数据技术规范数据治理运营应用需求推动应用需求推动 数据技术规范数据治理运营应用需求推动应用需求推动 项目实施方案规划以构建一个能持续高效运转的大数据治理与应用运营体系为目标以构建一个能持续高效运转的大数据治理与应用运营体系为目标汇聚公共数据建设大数据资源中心数据湖2平台应用运维平台功能迭代数据治理运营建设空间地理、城市码等各类应用专题库制定政务大数据治理技术与管理流程规范完善人基础库建设构建自然人与企业画像建设政务大数据能力平台433某市政务大数据资源平台建设实施数据能数据能力平台平台建设先行长期治理运营平台建设以功能线划分数据平台支持多个治理运营组)1+N运营模式即统一数据治理运营以业务线划分构建一个能持续高效运转的政务数据治理运营体系始终以数据服务业务为目标，持续建设高价值的数据资产与服务平台建设先行长期治理运营平台建设以功能线划分数据平台支持多个治理运营组)1+N运营模式即统一数据治理运营以业务线划分构建一个能持续高效运转的政务数据治理运营体系始终以数据服务业务为目标，持续建设高价值的数据资产与服务 政务大数据治理方法论·治理体系与实施原则平台建设与治理运平台建设与治理运营团队相独立政务大数据治理运营实施原则政务大数据治理运营支撑体系政务大数据治理运营支撑体系数据治理组织治理平台数据模型设计组数据分析组数据治理管理领导小组基础模型开发组平台开发组牵头业务部门信息部门其他业务部门数据治理实施部其他管理部门应用模型开发组运行维护组数据质量管理组数据安全管控组 数据模型设计组数据分析组数据治理管理领导小组基础模型开发组平台开发组牵头业务部门信息部门其他业务部门数据治理实施部其他管理部门应用模型开发组运行维护组数据质量管理组数据安全管控组 数据治理组织建设数据治理工作离不开强有力的组织保障，政府必须构建专门的数据治理管理团队，由专门的数据治理管理团队成为组织大数据战略的制数据治理典型团队架构信息化领导小组数据治理典型团队架构数据归集组数据归集组数据对接组数据对接组数据清洗组数据清洗组项目总集管理项目总集管理需求管理组需求管理组 数据治理制度规范数据治理相关的技术与管理流程规范规定了数据中心与业务部门，以及各系统之间的数据归集、数据模型设计、数据模型开发、数据数据共享应用申请流程数据共享应用申请流程数据开发需求响应流程数据共享技术规范数据安全管理规范数据资产管理规范数据质量要求管理规范数据模型开发技术规范数据模型设计技术规范数据归集技术规范数据归集件下发库表下发据调用政务数据政府内部单位数据使用机构社会组织基础库共享库分发分发公共数据归集件下发库表下发据调用政务数据政府内部单位数据使用机构社会组织基础库共享库分发分发公共事业数据主题库分发分发ODS清洗加物联数据专题库分发分发行业数据接口调用联网数据 治理运营通用流图政务大数据资源中心-数据湖&数据库标准管理 标准管理 数据治理实施流程准备数据资产开发调度数据编目质量监控数据应用规范设计数据采集准备数据资产开发调度数据编目质量监控数据应用规范设计数据准备数据源数据湖数据仓库资产数据数据源维护数据仓库历史数据全量迁移源连接和迁移作业运行作业业务数据增量采集定义增量设置触发运行作业数据规范主题设计主题设计码表管理数据标准关系建模维度建模指标管理维度建模指标管理流程框架业务指标技术指标业务指标指标规则业务场景运行检查数据质量规则模板作业质量运行检查数据地图业务资产技术资产数据权限数据安全数据安全申请审核 数据治理关键心法前置前置-定义数据治理与管理相关的技术、业务与管理标准及规范数据上报提交规范与要求数据使用申请与使用规范数据应用需求受理开发流程编制数据资产目录数据质量标准定义数据开发技术标准元数据信息配置坚定的业务目标强力的组织领导独立的运营团队强大的系统工具高效的技术支撑强调数据强调数据管理治理各方权责综合运用技术、管理甚至行政手段，来保障这些规范的落地与执行配套管理、沟通与考核机制明确数据中心职责目标范围数据标准执行控制智能化监控与告警技术标准执行控制强元数据前置控制大数据平台建设方案P2P广播节点管理加密处理共识管理快照管理智能合约核心引擎地图展示图层管理资源定位热力分析轨迹追踪统一用户认证密码服务P2P广播节点管理加密处理共识管理快照管理智能合约核心引擎地图展示图层管理资源定位热力分析轨迹追踪统一用户认证密码服务数据分类分级数据脱敏安全风险预警安全日志审计基础资源监控应用服务监控监控告警管理平台巡检管理运维流程处理区块链平台GIS能力平台安全管理平台统一运维平台新建 平台功能架构设计指挥中心·可视化大屏数据共享门户数据共享门户AI能力平台目录系统数据资源&支撑平台数据共享交换可视化平台空间地理库数据治理互联网+监管电子证照库城市码RK库FR库数据源数据共享提供通用A能力I引擎支撑智能场景应用运营指挥大屏人工智能能力平台统一管理入口整合各子平台功能管理应用数据提供统一地理相关应用GIS基础能力平台分布式的数据安全区块链子平台现数据资源集中应用数据目录管理系统数据可视化分析与展示支撑数据共享提供通用A能力I引擎支撑智能场景应用运营指挥大屏人工智能能力平台统一管理入口整合各子平台功能管理应用数据提供统一地理相关应用GIS基础能力平台分布式的数据安全区块链子平台现数据资源集中应用数据目录管理系统数据可视化分析与展示支撑可视化平台数据化开发支撑统一数据治理与管控实现数据应用的开发数据的可视化展示支撑数据治理管理子平台提供数据交换能力实现数据采集与开放数据共享交换子平台深度数据分析展现提供全局态势可视提供基础数据底座实现数据存储与计算数据支撑子平台专题库主题库基础库数据库数据湖 平台各部分架构关系 数据运维子平台 构建统一系统监控与维护能力，对各子平台进行实时监控与集中运维，保障平台高效、稳定运行数据资数据资源中心构建全生命周期数据安全防护能力，提供统一数据与信息安全保障，保障平台安全数据安全子平台数据安全子平台数据消费者数据消费者数据生产者数据归集数据服务 数据治理平台建设方案数据治理平台覆盖了从标准、设计、采集、开发到使用，再到交付的全数据治理流程，为组织提供了一站式数据治理运营平台，可满足数据采集某市政务大数据资源中心数据数据 数据安全管控用户群体解决方案服务能力 用户群体解决方案服务能力 数据治理平台整体架构数据开发人员数据开发人员数据科学家数据分析师数据管理员数据操作员业务用户元数据管理数据标准管理数据开发调度数据资产管理数据质量元数据管理数据标准管理数据开发调度数据资产管理数据质量数据共享质量稽核管理质量报告管理质量统计分析擎元数据维护数据模型设计技术标准管理数据资产总览服务监控元数据血缘业务标准管理统一任务调度数据资产检索质量规则配置订阅审核元数据采集元数据解析维度标准管理数据脚本开发数据资产目录命名标准管理可视化开发数据资产地图服务管理服务审核数据治理服务能力数据管理基础平台数据管理基础平台建模设计算法库 端到端的智能元数据管理提供多种异构数据源的元数据采集和维护，基于MOF规范将元数据统一管理起来，并提供端到端的元数据服务前向前向获取功能，在完成数据应用程序的同时，完成元数据的收集采集上元数据采集与解析配置、文件导入等多种采集方式变更变更监控情况进行监控进行增量扫描与采集一致性一致性保障术元数据、技术元数据与技术实现、元数据血缘与数据调度的一致性保障端到端端到端管控进行集中管理与监控确性和完整性进行全流程的管理和监控智能智能应用析，影响分析帮助组织有效维护管理数据索与360度资产画像》4-编辑模型应用程序①可视化开发：固化程序命》4-编辑模型应用程序①可视化开发：固化程序命逻辑②脚本开发:支持sql、Python、java、shell等类型的脚本 数据治理与应用开发流程数据探索数据探索模型开发程序开发程序测试审核上线2-2-模型定义创建模型基础信息、定义模型的元数据1-数据探索根据业务逻辑做需求分析，通过探索了解相关数据情况提供手工/批量方式3-构建表结构添加模型字段信息5-程序在线测试提供WEB界面可视化测试功能;查看执行时长、执行状态等信息，方便开发人员调试，性能分析6-调度配置7-提交审核并上线开发人员建立上线任务，提交审核并上线 可视化数据工厂数据工厂数据工厂发，使程序开发更简便，降低数据开发周提供包括数据采集、处理、装载、分发、用能力，以及基于个性化Hadoop接口封据处理能力，可根据自身需求，基于平台 全过程数据质量管控数据质量管理主要包含对数据完整性、准确性、鲜活性、权威性ü平台能够提供质量规则配置、质量监控、问题处理等功能，及时发现并分析数据质量问题，不断改善数据的使用质量，从而提升数据的可用性，挖掘数据更大的价值管理目标明确数据来源、含义、用法数据流可控数据质量可控方便各层级人员获取自动化收集管理目标明确数据来源、含义、用法数据流可控数据质量可控方便各层级人员获取自动化收集数据资产库 全生命周期数据资产管理资产生命周期管理听看思学平台层认知层感知层深度学习平台算法层算力层 听看思学平台层认知层感知层深度学习平台算法层算力层 AI能力平台建设方案说说构建统一、通用的人工智能算力资源与能力平台，基于大数据资源平台的海量数据资源，为各类政务应用场景提供支撑AIAI开放平台自然语言处理内容识别自然语言处理内容识别知识图谱用户画像预测/决策…文本/语音图像视觉文本/语音图像视觉物联传感AR/VR…机器学习平台机器学习平台 区块链平台整体架构>数据增值服务>数据可靠确权 区块链平台技术架构自主研发、安全可控、平台架构模块化可扩展、核心模块可替换升级 区块链平台服务架构 GIS能力平台建设方案基于地理位置展示相关企基于地理位置（区域）定基于地理位置对周边相关基于地理位置对业务资源平台基础管理平台基础管理资源网关管理作业调度管理核心地图引擎地图应用控件图层应用管理覆盖物管理测绘标注工具事件管理资源服务管理外部数据外部数据webservice接口等 可视化平台架构展示层展示端展示层展示端配置端应用层系统管理系统管理用户管理用户管理业务数据管理接口管理接口管理软件层缓存Redis中间件缓存Redis中间件Tomcat操作系统Linux数据库MySQL 可视化平台特性支持快速报表开发完善的数据管理策略炫酷的数据可视化效果全场景多屏应用方案为多屏时代的企业带来了全方位的数据可视化管理。从PC端到移灵活满足客户所需快速、轻松地向客户提供灵活的可视化分析。嵌入我们行业领先的安全规范审计安全运营>身份访问控制>数据授权管理>数据脱敏>数据加密/密钥管理>分类分级和数据防泄漏政务大数据资源平台 安全规范审计安全运营>身份访问控制>数据授权管理>数据脱敏>数据加密/密钥管理>分类分级和数据防泄漏政务大数据资源平台 安全管理整体设计方案安全服务体系平台安全服务体系平台平台安全运营平台安全运营数据流数据流数据流数据流>日志采集及存储>统一安全审计分析>风险告警监控基础设备信息源信息源整体：数据安全合规审查整体：数据安全合规审查 安全管理平台功能架构数据安全是大数据平台建设的重中之重，平台整体安全防护体系包括数据资源平台环境安全和数据全生命周期安全两大核心要素，结合数据安全能力成熟度模型，数据安全生命周期各阶段主要防护能力，政务大数据资源平台的安全管理平台功能架构设计如下：数据全生命周期安全采集采集传输存储处理交换销毁敏感数据发现存储介质安全数据销毁数据分类分级数据加密数据脱敏链路加密介质销毁数据脱敏数据防泄漏分层分级存储操作行为统计数据水印数据校验数据备份归档分布处理安全接口安全数据质量过期数据处理数据防泄漏数据防泄漏统一身份认证和权限管理统一身份认证和权限管理统一的数据脱敏管理统一的数据脱敏管理统一的分类分级管理统一的分类分级管理统一的敏感数据发现统一的加密秘钥管理统一数据数据防泄漏统一的安全审计分析 MIMA应用服务依据MIMA应用安全测评标准，规划符合信息系统MM应用技术要求的MM应用方案。在政务大数据资源平台的实施阶段，要同步实施MM应以保证所建设大数据资源平台达到符合MIYAO应用安全性测评要求。密码应用体系框架u云MM应用体系基于底层硬件合规的云服务器MM机和存储加密服务器实现底层的密码资源供给，形成云MM物理资源池，为大数据资源平台建立一套MM应用保障框架u基于MM技术为平台MM应用体系提供基本的技术与机制保障。面向业务的数据驱动的主动式运维统一运营分析管理能力一运营流程管理能力综合保障能力+精细化运维能力客户端到端全流程业务管理能力统一监控管理能力统一运营操作管理能力面向业务的数据驱动的主动式运维统一运营分析管理能力一运营流程管理能力综合保障能力+精细化运维能力客户端到端全流程业务管理能力统一监控管理能力统一运营操作管理能力统一资源管理能力物理、逻辑、应用、业务资源的 统一运维平台建设方案统一运营管理视图统一运营管理视图统政务大数据平台统一监控运维管理能力体系前台APP大屏展示个人门户统一门户资源管理中心运营分析中心操作管理中心运维流程中心智能监控中心中台AI算法引擎后台 前台APP大屏展示个人门户统一门户资源管理中心运营分析中心操作管理中心运维流程中心智能监控中心中台AI算法引擎后台 统一运维平台总体架构 指挥大屏建设方案利用指挥中心大屏建设可视化指挥大屏，强化信息掌控能力，提供全局态势可视，揭示城市运行趋势，形成城市超级洞察力，构建具数据采集与治理工具包渲染服务数据调研数据处理数据指标梳理系统接口对接数据采集图形化报表产品基座聚类分析预测分析分析模型即席分析分析报告 数据采集与治理工具包渲染服务数据调研数据处理数据指标梳理系统接口对接数据采集图形化报表产品基座聚类分析预测分析分析模型即席分析分析报告 指挥大屏功能建设市政务大数据指挥大屏市政务大数据指挥大屏数据资源应用数据资源应用模板分析模板分析 指挥大屏建设效果（示意图）数据资源中心与数据应用建设方案 政务数据资源中心整体规划设计数据共享区共享数据库结构化数据非结构化数据数据湖-贴源数据层基础及融合数据库基础库 公共数据库结构化数据非结构化数据数据湖-贴源数据层基础及融合数据库基础库 公共数据库 主题库 融合业务应用库专题库专题库人口库政务数据出生死亡社会数据.构建全生命周期标签.建立簇群关系 人口库政务数据出生死亡社会数据.构建全生命周期标签.建立簇群关系 基础库总体建设方案通过对政务数据、社会数据进行数据汇聚、标准化处理、数据整合及价值挖掘，构建形成RK库、FR库、空间地理库、电子证照库四电子证照库提供全市个人电子证照信息全面立体的展示FR相关信息.FR基本信息.资本与资产.生产经营.许可、资质和荣誉空间地理库提供地图服务、影像服务、地名地址服务、三维服务与坐标转换等功能服务。.基础地理信息.基础覆被信息.自然资源.环境与生态 基础库总体建设流程业务信息数据业务信息数据婚姻关系双方RK信息卫计口孕产妇及家属信息税务口地理实体数据影像数据高程数据地名地址数据三维数据人社口社会五险参保等RK信息公安口籍登记基本信息质监口K数据数据空间地理数据数据抽取数据换基础数据库人口库人口库建模元数据管理法人库法人库建模元数据管理空间地理库空间地理库建模元数据管理基础库管理应用RK应用RK画像、周期管理、模板管理、字段映射、执行策略、入库管理、异常告警、标签管理、标签映射和关系、图FR应用FR画像、周期管理、模板管理、字段映射、执行策略、入库管理、异常告警、标签管理、标签映射和关系、图空间地理应用地图服务、影像服务、地名地址服务、三维服务与坐标……公民姓名身份号码姓名匹配身份号码死亡标识RK库功能扩展 ……公民姓名身份号码姓名匹配身份号码死亡标识RK库功能扩展 数据功能整合开发 人口库建设方案通过对RK库数据源的全面梳理，构建全市统一的、以公民身份号位为唯一标识的、可共享的综合RK信息资源库。实现全市RK信息的RK全息视图RK信息统计少数民族统计少数民族统计劳动力劳动力结构统计教育结教育结构统计üRK库管理应用提供对汇聚形成的RK数据的概况展示、RK个案查询及多条件查询、RK统计、RK画像等应用功能，并提供针对RK数据处理规则、数据模型、字段来源、生命周期配置等管理维护功能。 自然人画像构建将来自公安网、委办局专网、互联网等数据源中的个人基本信息、行为信息、工作信息、相关物品信息、消费信息等数据进行有机整 RK库数据服务 基础主题、财务主题、生命周期主题、信用主题、关系主题、关键人主题6大主题域，数据应用于社会经济统计、FR信用领域、国家六大主题域建设多个FR类型员工主题关系主题信用主题生命周期主题财务主题 企业…………FR基础主题员工主题关系主题信用主题生命周期主题财务主题 企业…………FR基础主题 事业单位………… 构建FR统一视图与画像，多维展现与FR相关的各类信息，包括注册、变更、监管、消费投诉、商标、广告、供应商核准信息以及各委办局与FR间的相关信息（提警示信息、奖励信息、处罚信息等）。基础信息员工情况 接口类别指标类别接口类别经营情况经营情况 构建空间地理信息基础库基础地理信息数据库界、地貌、植被、土质、工矿建筑、三维模公共基础地理信息数据库公共专题共享地理信息数据库公众专用地理信息数据库 城市码主题库建设方案构建市民电子身份证构建市民电子身份证码社保卡公交卡身份证卡健康投诉举