医疗健康大数据平台 数据资产管理技术要求和测试方法

医疗健康大数据平台数据资产管理技术要求和测试方法本文件规定了医疗健康大数据平台数据资产管理的技术要求和测试方法，数据的数据标准管理、数据源管理、数据模型管理、元数据管理、主数据管理、数据资产管理、数据价值管理、数据服务管理、数据安全管理、性能要求、安全性等要求和测试方法本文件适用于医疗健康大数据平台数据资产管理功能的开发、测试、评估与验收等。2规范性引用文件下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅所注日期的版本适用于本文件。凡是不注日期的引用文件，其最新版本(包括所有的修改单)适用于本文件。GB/T18391.1-2009信息技术元数据注册系统(MDR)第1部分：框架GB/T35295信息技术大数据术语GB/T39725-2020信息安全技术健康医疗数据安全指南下列术语和定义适用于本文件。个人医疗健康数据以及由个人医疗健康数据加工处理之后得到的健康医疗相关电子数数据的命名、定义、结构和取值的规则关于数据或数据元素的数据(可能包括其数据描述),以及关干数据拥有权、存取路径、[来源：GB/T39725-2017,定义2.2.7]规定一个或多个其他数据模型的数据模型。[来源：GB/T18391.1-2009,定义3.3.20]组织中需要跨系统、跨部门进行共享的核心业务实体数据。2数据质量dataquality在指定条件下使用时，数据特性满足明确的和隐含的要求的程度。下列缩略语适用于本文件。SQL结构化查询语言JDBCJava数据库连接tructuredQueryLang5总体要求医疗健康大数据管理平台用于规范医疗健康数据在采集、存储、使用、加工、流通及服务等方面的基本流程。通过规范数据源、数据标准、数据价值、数据服务等维度的数据资产管理能力，保障数据资产管理的质量医疗健康大数据管理平台数据资产管理包含以下方面：数据标准管理、数据源管理、元数据管理、主数据管理、数据模型管理、数据资产管理、数据价值管理、数据服务管理、数据安全管理、性能要求、安全性等6医疗健康数据类别6.1数据分类分级基本原则按照医疗健康数据对国家安全、公共利益或个人、组织合法权益的影响和重要程度，参考GB/T39725,对医疗健康数据进行分级分类，在医疗健康大数据平台数据资产管理中提供6.2医疗健康数据分类医疗健康数据可以分为个人属性数据，健康状况数据、医疗应用数据、医疗支付数据、卫生资源数据与公共卫生数据等5类。各类数据具体内容如表1所示。在卫生信息领域使用的数据元、数据集、值域代码等相关标准可参考相应卫生信息标准。合能够识别特定白然人的3)个人通讯信息，包括个人电话号码、邮箱、张号及关联信息等：4个人生物识别信息，包括基因、指纹，声纹、掌纹、耳磨、虹膜、所涉及的与费用相关的数例如不能标识个人身份的数据，各科室医生数据主体造成中等程度的损害。限于获得授权的项目组范围内使用数据主体造成较高程度的损害。例如可以直接标识个人身份的数据，仅限于47技术要求7.1数据标准管理数据标准管理可规范医疗健康数据格式与命名的准确性，应具备以下基础功能a)应支持标准生成与导入：支持有权限的用户创建数据标准、数据标准规则、数据标准模板等：支持标准申请：支持标准审批，审批后的标准生效：支持有权限的用户按需批量导入数据标准：b)应支持标准修改与删除：支持有权限的用户修改数据标准，包括数据标准内容和数据标准描述等：支持有权限的用户删除数据标准：c)应支持标准映射：支持根据字段名、语义等进行映射推荐：支持自动预映射后的人工核对与修改；d)应支持标准维护：支持有权限的用户提出标准内容变更申请；支持动态维护，包括标准变更的需求采集、加工处理与结果发布；e)应支持标准版本查询与管理；支持有权限的用户根据标准名等精确搜索或模糊搜素数据标准信息；支持用户创建、导入、修改数据标准操作时的数据标准版本变更；1)应支持标准导出；支持有权限的用户按需批量导出数据标准；g)应支持标准分类管理：支持数据标准按目录分类展示；支持用户浏览数据标准分类目录，并逐层递进；支持用户对数据标准分类目录执行增删改操作；h)应支持标准执行管理：支持数据标准在元数据管理、数据质量管理、数据模型管理等方面应用情况的查询和展示；1)应支持标准监控：支持标准实时监控，查看标准发布审批、生效失效和标准变更情况统计等。7.2数据源管理数据源管理应具备以下基的功能a)应支持数据源分类：支持用户测览数据源目录，并逐层递进；支持数据源按目录或其他形式分类展示；b)应支持数据源配置：支持有权限的用户按需新增某种类型的数据源配置，包括数据源名称、JDBC连接、用户名、口令和描述等，支持数据源拷贝、批量导入配置等c)应支持数据源修改：支持有权限的用户按需修改未在使用中的数据配置，包括数据源名称、JDBC连接、用户名、口令和描述等d)应支持数据源删除：支持有权限的用户按需删除未在使用中的数据源配置：e)应支持数据源授权：支持有权限的用户授权某个数据源给其他用户使用，井支持权限回收；f)应支持数据源连接测试：支持用户测试数据源连接是否连通，以此检验数据源是否可以正常使用或配置是否正确；g)应支持数据源搜索查询：支持用户通过精确搜索或模糊搜素数据源名称等内容得到数据源信息。业务系统权限，数据管理系统支持按照业务系统进行数据源的权限管理。7.3数据模型管理5根据应用范畴不同，数据模型可分为组织级数据模型与系统应用级数据模型。组织级数据模型包括主题域模型、极念模型、逻辑模型：系统应用级数据模型包括逻辑模型、物理模型。数据模型通过结构化语言将组织的数据需求综合分析，按照模型设计规范重新整合需求。数据模型管理通过对数据模型的比对、分析及展示，实现组织内统一、跨系统、多团队并行协作的数据模型管理体系，应具备以下基础功能：a)应支持数据模型类目管理：支持有权限的用户创建、修改和删除数据模型目录；支持用户浏览数据模型目录：b)应支持数据模型设计：支持以组织级数据模型指导系统应用级数据模型的设计：支持主题域模型、概念模型、逻辑模型及物理模型设计、创建、删除与映射：提供可视化建模，支持拖拽式和自定义SQL:支持多表数据关联。支持行列级数据权限控制：支持数据表字段类型、字典的转换、字段别名与隐藏、计算表达式等设置：c)应支持数据模型查询：支持用户通过精确搜索或模糊搜索查询数据模型，并展示数据模型的具体信息：支持展示组织级数据模型与系统应用级数据模型映射关系d)应支持数据模型一致性比对：支持对逻辑表和已物化物理表的字段一致性进行分析、比对和总结：e)应支持数据模型标准管理支持数据模型实体及属性的标准创建、修改、删除和查询，包括自定义、自动和手动创建；支持数据模型标准与数据标准的映射f)应支持数据模型版本管理：支持记录数据模型变更的记录：支持数据模型版本的查询，以查看数据模型的历史信息元数据管理涉及元数据创建、存储、整合与控制等环节，能够体现出数据产生过程及资产分布，应具备以下基础功能：a)应支持元数据采集支持用户采集或导入元数据和元模型，包括自动(或订阅)、手动支持包括数据库、大数据工具、报表工具等的采集；b)应支持元数据分类：支持元数据分类目录创建(包括自动、手工或自定义);支持用户测览元数据目录，并逐层递进；c)应支持元数据概览：支持通过元数据概览页面展示元数据对象(如元数据目录)、元数据统计信息和元数据变化趋势等内容d)应支持元模型管理：支持用户创建元模型，内容包括业务元数据、技术元数据和管理元数据等，创建方式包括自动和手动采集等：e)应支持元数据应用：支持组织内各类元数据的分析应用，包括查询、血缘分析、影响分析、符合性分析、质量分析等；f)应支持元数据查询：支持用户通过精确搜索或模糊搜素元败据名称等得到元数据信息g)应支持元数据导出：支持用户按需导出元数据；h)应支持元数据标准管理：支持创建、修改、删除涉及元数据管理的标准，标准的内容包括元模型中的元素(业务元数据、技术元数据、管理元数据)等；i)应支持元数据稽核：支持元数据的稽核验证，包括命名规范、填充率、信息完整性、合规性等；支持稽核报告的生成和展示；j)应支持元数据版本管理支持有权限用户创建、修改、删除元数据操作时的历史信息支持用户查看元数据历史信息；支持两个不同版本元数据比对，并展示结果信息：k)应支持元数据关系管理：支持按照元数据间的物理主外键、逻辑主外键等建立元数据之间的关系，并可查看关联的字段信息：61)应支持元数据标签管理：支持元数据与标签形成关联，如用户画像、数据分类分级等标签，并支持按标签来检索；m)应支持元数据变更订阅：支持以订阅邮件等方式发送元数据变更详情，并获取元数据7.5主数据管理主数据管理通过对主数据标准和内容的管理，保证主数据在各系统间的准确性、一致性、完整性，实现主数据跨系统共享使用，应具备以下基础功能：a)应支持主数据分类展示：支持有权限的用户创建主数据分类目录，包括自定义、自动和手动等方式：支持用户测览主数据目录，并逐层递进：支持主数据按目录分类展示b)应支持主数据创建支持有权限的用户创建和申请主数据，包括主数据的名称、编码、参考数据等：支持主数据审批，审批后的主数据生效：c)应支持主数据导入与导出：支持有权限的用户批量导入与导出主数据：d)应支持主数据修改：支持主数据变更请求；支持主数据变更审批，审批后修改的主数据生效；e)应支持主数据查询；支持主数据精确查询和模糊查询，展示相应的主数据信息；f)应支持主数据标准管理：支持主数据模板以及模板元素的标准管理，如主数据编码和代码；支持主数据标准与数据标准的映射和同步：g)应支持主数据版本管理：支持用户创建、导入、修改主数据操作时的主数据版本变更支持用户通过查询主数据版本，查看主数据的历史信息；h)应支持主数据统计分析支持对主数据的分类、分布和应用做可视化的统计分析展示。7.6数据资产管理数据资产管理通过对数据资产进行统一、自动化处理，形成数据元库，能够多角度、全方位展示数据资源，以可视化、工具化提升数据应用效果，应具备以下基础功能：a)应支持数据资产概览支持元数据、数据标准、数据资产、自定义核心指标等的概览b)应支持数据资源目录管理；支持数据资源目录创建、概览、检素、导入与导出；c)应支持数据资源管理；皮持数据资源注册、分类、编辑、删除、导入与导出；支持从数据源到数据资源的全流程可视化操作；d)可支持数据指标管理功能：支持数据指标定义、基于标准SQL配置、实时更新、定时更新、发布与应用；e)应支持数据资产检索；支持对采集的数据信息进行加工与管理，形成语义信息；支持检索治理后的数据追踪溯源，快速定位数据项；支持快捷检索功能，查找不同类型数据资产定义明细信息；f)应支持数据资产溯源支持查看数据模型中每个表、每个字段的数据来源和加工逻辑g)应支持数据资产质量控制：支持查看数据资产、监控数据资产h)应支持数据遥检管理：支持数据资产自动化采集：支持展示数据资产的不同版本差异支持记录资产变化、监管数据资产是否规范化管理；i)应支持数据资产报告：支持按一定分类原则展示数据资产的分布和统计信息；j)应支持数据资产评估支持对当前数据资产管理能力进行评估展示，包括评估的时间、范围、维度、结果及评估后的建议措施等；支持对数据资产管理能力评估结果的动态趋势展示；7k)应支持数据资产共享和流通：结合医疗健康数据分级分类，提供区块链、多方安全计算等多种隐私计算技术，支持根据应用场景配置数据资产：1)应支持数据退役：支持有权限的用户根据外部监管机构和内部业务用户需求，对历史数据归档、迁移和销毁：支持定期检查退役数据状态：支持归档数据查询：m)应支持数据资产全量与增量报告：支持对当前全量以及增量(每日、每周等)数据资产的各类分布和统计信息。数据价值管理通过对数据内在价值的评估，管理数据成本和收益，支撑数据资产化，应具备以下基础功能：a)应支持数据需求分析：根据医疗健康应用场景，支持形成数据需求文档，包括数据名称、含义、创建、使用、展示、质量及安全等。支持有权限人员评审数据需求；支持对数据需求的集中管理，允许汇总分析和历史回顾：b)应支持数据确权管理：支持采用分布式计算、混淆加密算法等技术对数据进行确权认c)应支持数据成本管理：支持自定义数据成本核算指标，包括采集、存储和计算的费用 (人工费用、IT设备等直接费用和间接费用等)和运维费用(业务操作费、技术操作d)应支持数据收益管理；支持自定义数据收益核算指标，包括数据分类、使用频次、使用对象、使用效果和共享流通等方面e)应支持数据价值评估；支持自定义数据价值计算指标，包括数据连接度的活性评估、数据质量价值评估、数据稀缺性和时效性评估、数据应用场景经济性评估；支持自定义数据价值计算公式，包括成本法，市场法及收益法等。7.8数据服务管理数据服务管理围绕医疗健康场景内部数据共享和外部数据流通，构建服务目录，提供数据或数据分析结果等服务，能够完整记录数据服务信息，最终生成数据服务报告，展示数据服务价值，应具备以下基础功能和辅助功能a)应支持服务分类展示；支持数据服务按目录分类展示；支持用户浏览数据服务分类目录，并逐层递进：支持有权限的用户对数据服务分类目录进行创建、修改和删除等操b)应支持服务目录：支持有权限的用户在数据服务目录上添加、修改、删除新的服务；支持服务目录版本管理；o)应支持数据服务封装：支持有权限的用户对数据过装、上架、下架等处理；d)应支持数据服务申请：支持用户浏览上架的数据服务、中请数据服务；e)应支持数据服务审批：支持有权限的用户审批数据服务申请f)应支持数据服务详情展示：支持展示数据服务，包括数据服务的种类、各类别数据服务的效果、数据服务的业务场景统计等；g)应支持数据服务监控：支持监控数据服务订阅情况，如设置数据服务订阅日志，以查看数据订阅相关信息7.9数据安全管理数据安全管理是结合信息安全的技术手段保证医疗健康数据资产使用和交换共享过程8中的安全。为数据提供适当的认证、授权、访问和审计，以防范可能的数据安全隐患。该模块需具备以下基础功能：a)应支持数据脱敏：支持脱敏加密规则、算法以及任务的管理：支持静态脱敏，如在非生产环境，将数据脱敏转换后提取到脱敏数据库中：b)应支持数据分类分级：支持信息安全等级分类和密级分类，包括自动分类分级和人工分类分级：支持基于AI算法的实体识别、文本解析等文本数据的分类分级：c)应支持异常监控：支持数据生存周期的安全监控，并在出现安全隐患时发出预警：d)应支持安全项扫描：支持根据设置的安全词库和安全规则，扫描指定数据源，识别敏感信息：e)应支持引入主动隐私保护技术：支持对具有隐私泄露风险的数据，进行风险监测、凤险评估、主动提醒、责任追溯。医疗健康大数据平台应满足以下性能要求：a)应支持适宜的响应时间：用户进行在线实时查询业务操作，支持查询时间低于5秒的秒级搜素；b)应支持适宜的系统容量可存储的医疗健康数据(包括EMR数据、生物样本库数据、实验室数据等)满足实际工作需求；c)应支持适宜的系统并发用户数；用户同时并发数量满足协同工作实际需要7.11安全性要求医疗健康大数据平台应满足以下安全性要求；a)应支持用户身份认证：支持创建用户账户，设置口令和权限；支持定义用户组，设立口令标准、管理用户，口令，用户组等；支持用户身份验证与鉴权；b)应支持角色授权：支持权限配置、查询功能权限的分配情况：支持权限的禁止和互斥关系的配置；c)应支持租户隔离：管理用户、口令、用户组和权限。医疗健康大数据平台应满足以下要求a)应支持兼容性：兼容不同操作系统、浏览器及主流硬件平台b)应支持高可用性：无单点故障，具备主节点失效恢复机制；支持软件中的任一构件更新、加载时，在不更新与上下构件的接口的前提下，不影响业务运转和服务；c)应支持易用性：易于安装和使用，用户界面友好d)应支持可扩展性：采用分布式多处理机结构，支持硬件动态扩展：支持平滑无中断在线扩容或新增业务。8测试方法8.1数据标准管理测试目的：验证医疗健康大数据平台支持有1)数据管理环境能够正常运行；3)在数据标准页面中，输入某字段名，选择映射推荐；查看预映射的7)在数据标准页面中，选择某一节点，逐层递进查询：查8)在数据标准页面中，选择某一节点目录下的数据标准：查看该数据标准1)在步骤1)中，数据标准添加/导入成功，该标准在标准列表中显示；2)在步骤2)中，数据标准修改/删除成5)在步骤5)中，数据标准版本信息发生变化，与修改内容保持一致：测试目的：验证医疗健康大数据平台支持有1)数据管理环境能够正常运行；2)用户注册完成并已分配相应权限，且该用户己登录；1)查看数据源目录，并逐层点开；查看某个目录节点下的数据源及其相关信息；用户名、口令和描述等信息，并保存；查看修改后的数据源；用户或用户组，并保存：在数据源管理页面，选择该数据源查看授权6)在数据源管理页面，选择某一数据源进行预期结果；1)在步骤1)中，可以浏览数据源目录及逐层测览各个目录节点下的数据源及其相关信息；2)在步骤2)中，新增数据源成功，并能够在数据源目录3)在步骤3)中，数据源修改成功；4)在步骤4)中，数据源删除成功；5)在步骤5)中，在所选数据源下新增/取消用户或测试目的；验证医疗健康大数据平台支持有1)数据管理环境能够正常运行；2)用户注册完成并己分配相应权限，且该用户己登录；查看增加/删除的分类节点；2)在数据模型管理界面，以拖拽式或自定义SQL建立数据模型；据模型管理页面的列表信息搜索得到的结果；4)在数据模型管理页面，选择一致性比对，查看逻辑表和物理表比对结果；点下新建/修改/删除数据模型标准，并保存，查看数据模型标6)在数据模型管理页面，查看某一数据模型的版本信息，点击对比不同版本1)在步骤1)中，可以浏览数据模型目录及数据模型信息，分类节点增加/删除成功；2)在步骤2)中，概念模型、逻辑模型、物理模型等模型创建成功；3)在步骤3)中，能够显示符合搜索条件的模型信息；4)在步骤4)中，能够显示模型一致性比对信息；5)在步骤5)中，可浏览数据模型标准，对模型标准的新建/修改/1)数据管理环境能够正常运行；2)用户注册完成并己分配相应权限，且该用户己登录；2)在元数据管理页面，逐层查看元数据分类目录以及3)在元数据管理页面，打开元数据概览模块，查看元数5)选择元数据分类目录某一节点，查看该元数据10)创建/导入/修改某一元数据并保存，查看元数据历史信息变更情12)打开元数据管理模块。查看元数据标签关联，按标签进行检索：2)在步骤2)中，可以逐层浏览元数据分类目录，并查看3)在步骤3)中，可以查看元数据概览信息；4)在步骤4)中，元数据目录该节点下有新5)在步骤5)中，可以查看到该元数据的血缘关系；6)在步骤6)中，能够显示符合搜索条件的7)在步骤7)中，本地计算机中被导出全部元数据与原全部元数据一致：8)在步骤8)中，可以查看已创建、修改、删除的9)在步骤9)中，可以查看创建元数据的稽核结果；12)在步骤12)中，可以查看元数据标签并1)数据管理环境能够正常运行；2)用户注册完成并已分配相应权限，且该1)查看主数据目录，并还层点开：查看某个目录节点下的主数据表；本，对该主数据完成修改操作，查看并记录该主数据的版1)在步骤1)中，可以逐层浏览主数据分类目录，并查看8.6数据资产管理测试目的：验证医疗健康大数据平台支持有1)数据管理环境能够正常运行；2)用户注册完成并已分配相应权限，且该用户已登录；3)打开数据资产管理页面，选择某一数据资源导出至本地计算机5)打开数据资产管理页面，输入数据名称进行搜索，查看搜索6)打开数据资产管理页面，选择某一数据表/字段，查看数据来源和加工逻辑：7)打开数据资产管理页面，查看数据资产质量控制配置；8)打开数据资产管理页面，选择某个数据表，展示不同版本差异、资产变化及应用记录；10)打开数据资产管理页面，查看数据资产能力评估水平：11)打开数据资产管理页面，查看数据资产共享和流通详情：13)打开数据资产管理页面，查看数据资产全量与增量报告详情。1)在步骤1)中，可以查看数据资产总体分布、变化趋势、统计指标与分析；2)在步骤2)中，可以逐层浏览数据资产目录，并成功创建数据资产目录；3)在步骤3)中，本地计算机中被导出数据资产与数据资产一致；5)在步骤5)中，能够显示符合搜索条件的数据信息；7)在步骤7)中，能够显示数据资产质量控制信息；8)在步骤8)中，能够显示数据资产历史信息和变化情况；9)在步骤9)中，能够显示数据资产报告，展示数据资产的分布和统计信息；10)在步骤10)中，可以查看数据资产能力评估水平；11)在步骤11)中，支持基于多种隐私计算技术的数据共享和流通；12)在步骤12)中，能够数据归档并显示归档信息；13)在步骤13)中，能够显示数