AtlasData-测试数据管理及隐私数据漂白v1.9

ATLASDATA测试数据管理与隐私数据漂白解决方案云图数据脱敏一体机InfoMask目录1.行业分析2.产品介绍3.竞争分析4.项目经验业界现状“11.30”特大电信诈骗案中国内银行客户损失了1.4亿人民币汇丰银行因内部IT员工盗窃客户资料损失重大，导致在受到侵害的2.4万客户中有9千名白金资格以上的客户离开了汇丰银行2011年12月CSDN网站600万用户信息泄露事件2014年1月2000万酒店开房数据泄漏2014年12月25日，13万个12306用户信息遭泄露，其中包括账号、明文密码等2015年4月22日千万级社保信息面临数据泄漏的危险，全国大部分省份设备系统存在安全漏洞……信息作为IT的核心，其安全问题随着它的价值越来越凸显行业法规PCIDSS-支付卡行业FISMA-联邦信息管理法案SOX-塞班斯法案HIPAA-健康保险流通与责任法案GLBA-格莱姆-布里勒法案各地区的个人资产保护法国际法规国内法规《信息系统安全等级保护》GBT22239-2008信息安全技术信息系统安全等级保护基本要求GBT22240-2008信息安全技术信息系统安全等级保护定级指南“人大常委会关于加强网络信息保护决定草案”《信息安全技术公共及商用服务信息系统个人信息保护指南》2013年2月1日起实施。2013年1月31日证监会发布《证券期货业信息系统运维管理规范》，5.4.6章节银监办发[2014]317号《银行业应用安全可控信息技术推进指南》，总则中第二条2015年保监会发《保险机构信息化监管规定(征求意见稿)》，第二十二条行业标准逐渐形成企业问题如何获取数据？需要什么量级的数据？数据流转过程是否全程管控？数据含有敏感信息吗？如何保证敏感数据不会泄漏？变形数据的仿真度是否会影响应用效果呢？...数据管理所面临的一系列问题企业现状数据不经过处理直接通过备份手段提供出去所有的私密信息都直接泄露由客户的相关人员进行手工或者编写简单的函数进行脱敏效率低下，占用大量人力和时间算法简单容易逆向运算得到真实数据导致数据大量失真，虽然私密数据漂白了，但仿真度太低，影响应用效果对客户人员技术水平要求比较高交由开发商处理凭空造数据，数据的仿真度极低，严重影响开发和测试效果；使用过往客户的真实数据，违反保密协议！对真实数据进行漂白，提供的测试数据质量同样不高，普遍同样存在算法不成熟的问题，而且真实数据已经泄漏目前的主要手段专业数据脱敏的必要性需要对隐私数据进行保护数据存在巨大的商业价值数据泄漏会对企业造成较大的损害法规遵从提高数据的数据质量，降低系统上线的风险减轻人员的工作负担各种不同的环境对样例数据都有不一样的需求数据的业务单元数据的子集管理流程化管理隐私数据漂白技术区别漂白（又称脱敏）与加密加密是在数据保存和传输过程中，利用密钥对明文数据处理成不可见数据，在需要访问数据时还需要利用密钥将数据解密，获得真实数据。漂白是对真实数据进行变形成为伪造数据，是明文，可以直接访问，但无法获得真实信息数据漂白的目的切断自然人法人与数据之间的关联，对能够从生产数据中定位到某个个体的数据项进行变形，从而达到保护客户资金与信息的目的变形操作的基本原则变形后的数据应该在格式、类型、长度、码制、字符集、唯一性和分布率保持一致数据变形后必须保持表与表之间的信息关联关系数据变形后的数的分布特征也可能需要满足特定要求项目流程1确定脱敏的数据种类2梳理隐私数据模型3系统平台架构设计4软硬件产品实施5二次开发6数据建模7脱敏规则配置传统脱敏项目流程与工作量：流程长、效果差0每个系统几十到几百人天1～2人天3～5人天100人天每个系统60人天每个系统10人天工作量不可控数据质量数据关联性InfoMask是云图数据企业综合数据治理平台针对测试数据管理的解决方案，它集合了数据抽取、私密数据漂白、测试数据管理、数据装载等功能于一体，具有流程化、自动化和作业复用等特点。作为软硬一体化的设备，它拥有强大的功能、易于部署和使用等特点，开箱即用式的优势能够极大减轻工作人员的工作强度以及项目周期。产品方案简介InfoMask功能与流程数据发现能够自动扫描并定位企业当中的敏感数据发现表与表之间的关联关系数据抽取支持多种数据平台敏感数据漂白保持数据的关联关系提供高仿真度的伪数据不可逆算法，保证数据安全数据装载支持子集管理支持异构平台的高速数据装载数据管理支持数据压缩支持数据漂白前后比对功能功能介绍010001111011001010001001010101000111010000101001010101000100101010100011101000111011001000101000开发测试培训外部数据提取审计系统关联自动发现数据抽取漂白脱敏数据装载管理员开发员授权01000111101100101000100101010100011101000101000111101100010001110100010100011110110010100010010101010001110100010100011110110001000111010001010001111011001010001001010101000111010001010001111011000010101Oracle、MySQL、MSSQL、HaDoopHIVE、PostgreSQL、DB2、Sybase、TeraData、GreenPlum……Oracle隐私数据发现A001A002A003…周绮3325221987050400116228480868302626371陈家洛2106021987112605136228480283741736482袁承志4101831993072100156228480868392397826李莫愁3310811986012100146228480838273728463…B001B002B003B004B005001001023325221987050400112015-02-0210:12:12DEPOSIT30000.00001001032106021987112605132015-02-0210:12:12WITHDRAW2500.00001001044101831993072100152015-02-0210:12:12PAY299.00001001053310811986012100142015-02-0210:12:13DEPOSIT10000.00…C001C002C003…周绮332522198705040011136209343678605726959771陈家洛210602198711260513159015202258602083329284袁承志4101831993072100151393386120886031186104218李莫愁331081198601210014180199616608602227215603…中文姓名身份证号码银行卡号中文姓名身份证号码手机号码固话号码身份证号码准确率高达99.5%以上！隐私数据漂白A001A002A003…周绮3325221987050400116228480868302626371陈家洛2106021987112605136228480283741736482袁承志4101831993072100156228480868392397826李莫愁3310811986012100146228480838273728463…B001B002B003B004B005001001023325221987050400112015-02-0210:12:12DEPOSIT30000.00001001032106021987112605132015-02-0210:12:12WITHDRAW2500.00001001044101831993072100152015-02-0210:12:12PAY299.00001001053310811986012100142015-02-0210:12:13DEPOSIT10000.00…C001C002C003…周绮332522198705040011136209343678605726959771陈家洛210602198711260513159015202258602083329284袁承志4101831993072100151393386120886031186104218李莫愁331081198601210014180199616608602227215603…A001A002A003…林月如4222011987061400116228480868302342231杨立华4312231987122205126228480283723456433龙葵3101091993031100116228480868283475041李逍遥1308251986032400136228480838123323453…B001B002B003B004B005001001024222011987061400112015-02-0210:12:12DEPOSIT30000.00001001034312231987122205122015-02-0210:12:12WITHDRAW2500.00001001043101091993031100112015-02-0210:12:12PAY299.00001001051308251986032400132015-02-0210:12:13DEPOSIT10000.00…C001C002C003…林月如4222011987061400111362032837486057269545383杨立华431223198712220512159012348758602083324543龙葵3101091993031100111393334538786031186102342李逍遥130825198603240013180194852948602227214568…脱敏算法不可逆！跨业务系统保证数据关联性！！产品功能主流程隐私数据发现隐私数据梳理数据抽取数据漂白数据装载数据销毁DDL抽取计划调度任务即时脱敏辅助功能系统监控元数据管理子集管理版本管理异构数据库迁移权限管理与访问控制高级压缩白名单工作时间暂停/假日定义兼容特性Oracle9i,10g,11g,12cDB2LUWv9.5,v9.7,v10.1,v10.5DB2forSYSTEMZDB2forSYSTEMiInformixDynamicServer11.5,11.7,12.1SQLServer2000,2005,2008,2012MySQL5.xKDB数据源支持种类SybaseACEPostgreSQLTeradataGreenPlumHadoopHive文本文件MSOFFICEEXCEL漂白函数通用函数非结构化数据图像/视频/音频…表达式连接随机字符串序列号随机数查找替换混淆日期变换英文字符串变化传播……漂白模块与函数中文专用函数中文姓名证件号码电话号码中文地址电子邮件邮政编码企业名称工商注册号组织机构代码纳税人识别号银行卡号客户名称医疗信息随机中文用户扩展定制服务用户出口用户界面-隐私数据发现配置用户界面-隐私数据发现结果用户界面-数据漂白配置机型与配置选件：高级压缩功能

*注：漂白速度为缺省配置下不启用压缩功能的速率机型GM510GM1010GM2010GM3010GM5010漂白速度100000个/秒300000个/秒500000个/秒800000个/秒1200000个/秒空间500GB1.2TB2TB3TB6TB每500GB纯隐私数据脱敏参考时间8小时2.5小时70分钟40分钟25分钟新的项目流程1确定脱敏的数据种类2梳理隐私数据模型3系统平台架构设计4软硬件产品实施5二次开发6数据建模7脱敏规则配置相关部门人员共同商讨自动隐私数据发现+1小时的人工根据现有IT架构定制设计上架通电配IP！自动化配置！1小时？！仿真度、唯一性、关联性、数据质量特性IBMOPTIMIBMDatastageOracleDataMaskingInformaticaTestDataMasking云图数据Infomask即插即用流程化管理隐私数据发现功能隐私数据梳理功能本地数据漂白算法非结构化数据漂白异种数据库迁移流程中的数据安全性数据压缩速度很低一般很低很低很高

完全支持部分支持

不支持竞争分析项目周期从传统产品的几个月缩短至1天！！DB2forSystemZ&Systemi通过文本方式支持支持EBCDIC和UTF8编码的转换支持COBOLCopybook的定义表结构支持直接文本的自动发现支持支持针对文本的漂白脱敏支持文本结构的自动规则配置IBMMainframe&AS400（一）zOSAS400传输（转码可选）传输（转码可选）文本文本InfoMask漂白脱敏（转码可选）zOSAS400传输（转码可选）已脱敏文本DB2forSystemZ&Systemi通过JBOD接口支持支持EBCDIC和UTF8编码的转换支持COBOLCopybook的定义表结构支持直接隐私字段的自动发现支持针对大机和AS400的漂白脱敏支持自动规则配置支持多种异构环境加载IBMMainframe&AS400（二）zOSAS400通用平台直接抽取InfoMask漂白脱敏（转码可选）zOSAS400传输（转码可选）直接抽取直接连接生产与开发测试环境优势：日常使用与运维简单完全释放劳动力案例一某政府单位生产系统1生产系统2生产系统3数据脱敏系统平台开发测试