数据质量管理系统需求说明

数据质量管理系统需求说明数据质量管理系统质量控制台质量监控台基于指标运算和系统元数据分析，旨在将隐藏在后台的数据信息以简明易懂的可视化表达方式呈现出来，整体展现全局数据库数据质量情况，实时分析和呈现学校数据质量的最新状态,将数据质量分析形象化、直观化和具体化；

提供质量监控台，实现对系统及表总体集成及综合数据质量情况进行展示；通过详尽的指标体系和数据分析过程，最终将整体质量情况以图表的形式详细的展现出来，总体呈现质量信息包括当前集成系统数、表数、集成进度情况、共享库、历史库质量情况等信息，追溯现有的数据质量问题，帮助校领导以及管理人员掌握目前数据治理的整体质量情况；运行次数以图表形式直观反馈质量检查的任务运行运行总次数；运行错误以图表形式直观反馈质量检查的运行错误情况；质量报告数以图表展现生成质量报告数；检查来源分布以图表的形式，展现数据检查的来源分布；整体呈现以一张面板统一体现质量任务运行次数、错误、报告数等；质量规则通过主题监控，实现对全局数据库中的对象配置相应的规则进行数据质量监控，和规则调度执行配置；

提供规则视图，为用户实现对规则进行批量创建，对规则信息进行配置，按照规则对对象进行监控操作（包括波动、平衡、自定义3种规则的创建）；

为用户实现实时性、一致性、完整性规则检验；通过规则配置，实现数据质量属性、规则类型和告警设置，告警设置是对告警级别及告警类型的管理；空值校验对字段非空验证检查；

长度校验字段小于长度检查；代码校验对字段代码取值检查；唯一性校验字段唯一性检；合法性校验字段值合法性检查；上下限校验字段长度上下限检查；外关联检查支持外关联检查；质量分析展现通过综合质量详情，为用户实现对系统表和字段集成及质量情况、数据清洗情况及系统总体集成及质量改善情况进行展示；

提供各系统集成质量情况，实现单个业务系统总体质量情况，具体到系统的每一张表和字段的质量详情分析；

通过业务域集成情况，为用户实现业务域质量情况展示；

提供质量综合查看，实现对所有系统表整体质量情况进行查看；规则配置数提供规则配置统计；质量字段配置数提供质量字段配置数统计；任务调度数提供任务调度数统计；质量报告数提供质量报告数统计；问题数据数提供问题数据数统计；整体呈现通过一张视图统一呈现数据质量分析结果；质量报告数据质量报告是通过图文并茂的展示方式将数据质量问题进行周期性的说明和呈现，供领导查看和对外公布；

通过数据质量报告，为用户实现对系统整体质量包括历史现状、建设目标及当前质量情况等的分析并汇总成各季度报告以供订阅；

提供报告订阅，实现质量报告订阅功能，支持订阅报告内容（报告月份及报告内容订阅）进行自定义；

数据质量报告在呈现方式上采用个性化的表达方式，点击查看预览报告内容，可进行单双页切换阅览，内容呈现上多以图、表、文结合的方式，旨在多方位体现数据质量情况，数据分析宏观呈现，数据质量概况一目了然，同时提供报告内容定位选择，可快速定位查看报告；

通过报告订阅日志，为用户实现对质量报告详细记录展示进行订阅；

提供质量报告下载，实现数据质量报告下载功能；

报告配置：提供报告配置，为用户实现报告内容展示配置，针对不同的用户对不同的报告内容进行展示；

数据录入：通过数据录入，实现质量报告历史现状及本期建设目标相关数据录入及选择；

数据管理：提供数据管理，为用户实现质量报告相关图片和时间管理功能；生成报告选择指定任务，输入报告名称，即可快速生成质量检查报告；预览报告支持报告的预览,预览内容包含本次检查共发现问题数据行数，问题字段个数；其中某个表问题数据行数，问题字段个数；下载报告支持质量报告的下载，下载文件格式为.pdf;UC矩阵数据流向表级：各业务系统数据表UC情况分析及相应的字段映射关系展示；

提供UC分析，为用户实现对总系统数、总表数、产生表数以及被使用表数进行展示；包括具体业务系统的UC数据详情；任务调度列表对已经配置检查方法的字段表以列表的方式呈现出来；列表明细支持按任务序号、任务名称及启动操作的整体显示；流程监控流程实时监控：通过流程实时监控，实现全局流程运行情况监控，包括全局库、历史库和数据仓库流程运行监控；

提供流程告警，实现流程异常告警操作；

通过消息订阅，为用户实现流程异常消息订阅；

通过流程综合分析，实现对整体流程运行详细信息及流程调度信息的实时监控分析；

通过流程调度监控，为用户实现各个库具体流程调度信息展示；

提供流程明细查看，实现流程调度详细信息查看（包括业务库到前置库、前置库到全局库、全局库到业务库、全局库到历史库和历史库到数据仓库的流程明细信息查看）；

提供流程运行日志，实现流程运行日志查看；

提供流程流量分析，实现数据流量桑基图进行展示；

提供活跃流程一览，为用户实现对各时间段流程活跃情况进行统计展示；

通过业务系统依赖分析，实现对系统依赖关系进行分析展示（流程、表、字段数据输入输出情况查看）；

提供系统集成进度，为用户实现对各业务系统集成进度进行展示；

通过部门任务完成情况，实现以部门划分对各部门系统的质量情况进行展示；列表显示显示所有创建的任务列表；查询支持任务名称的搜索；删除删除创建的任务；启动手动启动调动任务；数据回溯服务通过数据回溯，实现对象全链路信息进行展示；

通过数据关系定位，为用户实现对数据进行模糊匹配查询，对数据信息进行定位，对系统对象进行关系定位，对象的流向及涉及的流程展示；显示列表显示任务名称、调度时间、调度数量（行）、正确记录数（行）、错误记录数（行）；告警管理通过告警信息分析，为用户实现系统告警信息进行分析展示，根据相应的规则对监控对象进行告警分析展示；

支持按照严重告警、重要告警、一般告警、提示告警分级，滚动播放告警信息，根据波动规则、平衡规则和自定义规则，自定义时间段进行告警信息的查看；

提供告警信息查看，实现不同告警级别下的详细规则信息及告警详情进行查看；问题数据列表1、支持通过任务名称搜索；

2、显示任务名称、数据表、时间、错误记录（行）、导出；问题数据明细查看支持对问题数据明细的查看，主要包含规则字段名称、开始时间、结束时间、状态、类型、级别等；配置向导系统初始化配置，提供向导配置系统依赖的数据源、ETL工具等依赖的配置，采集相关业务元数据；配置列表包含规则名称、规则状态、创建时间、规则明细查看；规则主要包含字段非空验证、字段固定长度检查、字段代码取值检查、字段小于长度检查、字段唯一性检查、字段值合法性检查、字段长度上下限检查、外关联检查等；新增规则包含规则名称、规则说明、检测语句；启动规则手动启动规则；停用规则手动停业规则；删除规则已经设置的规则进行删除，支持单个和批量删除；配置支持对业务层数据字段的检查规则配置，对单个字段的检查方法、参数进行配置；创建任务对业务数据表内，所有需要实现质量检查的字段规则创建任务；分析数据质量服务提供手动核验质量，为用户实现具体的规则对系统对象进行自定义核验操作并生成核验报告以供订阅；

通过质量分析订阅，实现对需要查看的系统质量情况进行自定义订阅，并支持对具体的订阅者进行推送；

提供核验分析日志，为用户实现数据核验分析详细记录展示；数量质量统计提供数据质量分析报告的整体统计；数据质量服务呈现提供数据质量服务报告服务的整体呈现，并能通过链接免登录查看；元数据服务通过数据录入，实现业务库前置库数据信息导入和全局库、历史库、数据仓库数据的同步操作；

提供流程录入，为用户实现业务库流程信息导入和历史库、数据仓库流程的同步操作；

通过数据分析，实现对导入的元数据信息进行数据分析和流程解析等操作；数据字段创建

提供数据字段配置服务提供字段的创建；数据字段编辑提供数据字段配置服务提供字段的编辑；数据字段的删除提供数据字段配置服务提供字段的删除；系统管理提供部门信息，为用户实现部门信息管理，支持对部门下的用户信息进行查询；

通过用户信息，实现对用户信息进行管理；

通过用户信息，实现对用户信息进行管理；

通过系统设置，实现对平台相关配置信息进行管理；

提供操作日志，为用户实现对访问系统的用户详细信息进行记录；组织树提供组织管理，提供组织树的查看；组织新增提供组织的新增，主要包含组织名称、