测试数据管理与隐私数据漂白解决方案

1、数据脱敏管理测试数据管理与隐私数据漂白解决方案目录1. 行业分析2. 产品介绍3. 竞争分析4. 项目经验业界现状“11.30”特大电信诈骗案中国内银行客户损失了1.4亿人民币汇丰银行因内部IT员工盗窃客户资料损失重大，导致在受到侵害的2.4万客户中有9千名白金资格以上的客户离开了汇丰银行2011年12月CSDN网站600万用户信息泄露事件2014年1月2000万酒店开房数据泄漏2014年12月25日，13万个12306用户信息遭泄露，其中包括账号、明文密码等信息作为IT的核心，其安全问题随着它的价值越来越凸显行业法规PCI DSS - 支付卡行业FISMA - 联邦信息管理法案SOX - 塞

2、班斯法案HIPAA - 健康保险流通与责任法案GLBA - 格莱姆-布里勒法案各地区的个人资产保护法国际法规国内法规信息系统安全等级保护GBT 22239-2008 信息安全技术 信息系统安全等级保护基本要求GBT 22240-2008 信息安全技术 信息系统安全等级保护定级指南“人大常委会关于加强网络信息保护决定草案”信息安全技术公共及商用服务信息系统个人信息保护指南2013年2月1日起实施。最高人民法院2014年10月9日公布最高人民法院关于审理利用信息网络侵害人身权益民事纠纷案件适用法律若干问题的规定，该司法解释于10月10日起施行。政府行业的信息安全等级保护工作开展行业标准逐渐形成企业

3、问题如何获取测试数据？需要什么量级的测试数据？谁来提供测试数据？测试数据含有敏感信息吗？如何保证敏感数据不会泄漏？测试数据的仿真度是否会影响测试效果呢？.开发新应用系统时，对于测试数据或样本数据，所面临的一系列问题企业现状数据不经过处理直接通过备份手段提供出去所有的私密信息都直接泄露由客户的相关人员进行手工或者编写简单的函数进行脱敏效率低下，占用大量人力和时间算法简单容易逆向运算得到真实数据导致数据大量失真，虽然私密数据漂白了，但仿真度太低，影响测试效果对客户人员技术水平要求比较高交由开发商处理凭空造数据，数据的仿真度极低，严重影响开发和测试效果；使用过往客户的真实数据，违反保密协议！对真实数

4、据进行漂白，提供的测试数据质量同样不高，普遍同样存在算法不成熟的问题，而且真实数据已经泄漏目前的主要手段测试数据管理的必要性需要对隐私数据进行保护数据存在巨大的商业价值数据泄漏会对企业造成较大的损害法规遵从提高测试数据的数据质量，降低系统上线的风险减轻人员的工作负担各种不同的环境对样例数据都有不一样的需求数据的业务单元测试数据的子集管理流程化管理隐私数据漂白技术区别漂白（又称脱敏）与加密加密是在数据保存和传输过程中，利用密钥对明文数据处理成不可见数据，在需要访问数据时还需要利用密钥将数据解密，获得真实数据。漂白是对真实数据进行变形成为伪造数据，是明文，可以直接访问，但无法获得真实信息数据漂白的

5、目的切断自然人法人与数据之间的关联，对能够从生产数据中定位到某个个体的数据项进行变形，从而达到保护客户资金与信息的目的变形操作的基本原则变形后的数据应该在格式、类型、长度、码制、字符集、唯一性和分布率保持一致数据变形后必须保持表与表之间的信息关联关系数据变形后的数的分布特征也可能需要满足特定要求隐私数据保护的范畴个人信息姓名帐号身份证号码电话号码通讯地址Email(账户余额)(交易记录)将数据经过处理后，无法定位到某个具体个体，以此作为保护目标企业信息户名帐号组织机构代码纳税人识别号电话号码传真通讯地址(账户余额)(交易记录)企业机密设计图文件数据分布数据趋势地理信息InfoMask是云图数据

6、企业综合数据治理平台针对测试数据管理的解决方案，它集合了数据抽取、私密数据漂白、测试数据管理、数据装载等功能于一体，具有流程化、自动化和作业复用等特点。作为软硬一体化的设备，它拥有强大的功能、易于部署和使用等特点，开箱即用式的优势能够极大减轻工作人员的工作强度以及项目周期。产品方案简介InfoMask集中数据存储与处理ORACLEMySQLMS SQLDB2InfoMask测试数据管理与隐私数据漂白平台数据管理员开发人员生产数据高仿真脱敏数据开发环境培训环境单元测试压力测试功能与流程01000111101100101000100101010100011101000101000111101100

7、001010101000111101100101000100101010100011101000010100101010100010010101010001110100011101100100010100001000111101100101000100101010100011101000101000111101100010001110100010100011110110010100010010101010001110100010100011110110001000111010001开发环境培训环境单元测试压力测试自动发现数据抽取漂白脱敏数据装载1%5%1%100%管理员开发员授权数据发现能够自

8、动扫描并定位企业当中的敏感数据发现表与表之间的关联关系数据抽取支持多种数据平台敏感数据漂白保持数据的关联关系提供高仿真度的伪数据不可逆算法，保证数据安全数据装载支持子集管理支持异构平台的高速数据装载数据管理支持数据压缩支持数据漂白前后比对功能功能介绍隐私数据发现A001A002A003周绮3325221987050400116228480868302626371陈家洛2106021987112605136228480283741736482袁承志4101831993072100156228480868392397826李莫愁 3310811986012100146228480838273728

9、463B001B002B003B004B005001001023325221987050400112015-02-02 10:12:12DEPOSIT30000.00001001032106021987112605132015-02-02 10:12:12WITHDRAW2500.00001001044101831993072100152015-02-02 10:12:12PAY299.00001001053310811986012100142015-02-02 10:12:13DEPOSIT10000.00C001C002C003周绮33252219870504001113620934367

10、86 0572 6959771陈家洛2106021987112605131590152022586 020 83329284袁承志4101831993072100151393386120886 0311 86104218李莫愁 3310811986012100141801996166086 022 27215603中文姓名身份证号码银行卡号中文姓名身份证号码手机号码固话号码身份证号码准确率高达99.5%以上！隐私数据漂白A001A002A003周绮3325221987050400116228480868302626371陈家洛2106021987112605136228480283741736

11、482袁承志4101831993072100156228480868392397826李莫愁 3310811986012100146228480838273728463B001B002B003B004B005001001023325221987050400112015-02-02 10:12:12DEPOSIT30000.00001001032106021987112605132015-02-02 10:12:12WITHDRAW2500.00001001044101831993072100152015-02-02 10:12:12PAY299.000010010533108119860121

12、00142015-02-02 10:12:13DEPOSIT10000.00C001C002C003周绮3325221987050400111362093436786 0572 6959771陈家洛2106021987112605131590152022586 020 83329284袁承志4101831993072100151393386120886 0311 86104218李莫愁 3310811986012100141801996166086 022 27215603A001A002A003林月如4222011987061400116228480868302342231杨立华431223

13、1987122205126228480283723456433龙葵3101091993031100116228480868283475041李逍遥1308251986032400136228480838123323453B001B002B003B004B005001001024222011987061400112015-02-02 10:12:12DEPOSIT30000.00001001034312231987122205122015-02-02 10:12:12WITHDRAW2500.00001001043101091993031100112015-02-02 10:12:12PAY29

14、9.00001001051308251986032400132015-02-02 10:12:13DEPOSIT10000.00C001C002C003林月如4222011987061400111362032837486 0572 69545383杨立华4312231987122205121590123487586 020 83324543龙葵3101091993031100111393334538786 0311 86102342李逍遥1308251986032400131801948529486 022 27214568脱敏算法不可逆！跨业务系统保证数据关联性！银行行业方案客户名中文姓名企

15、业名称客户ID身份证号码组织机构代码电话号码中文地址电子邮件证券行业方案客户名中文姓名企业名称客户ID身份证号码组织机构代码电话号码中文地址电子邮件工商注册号纳税人识别号银行帐号政府行业方案中文姓名企业名称身份证号码组织机构代码电话号码中文地址电子邮件工商注册号纳税人识别号银行帐号邮政编码漂白函数通用函数表达式连接自串序列号随机数查找替换混淆日期变换英文字符串变化传播漂白模块与函数中文专用函数中文姓名身份证号码电话号码中文地址电子邮件邮政编码企业名称工商注册号组织机构代码纳税人识别号银行卡号客户名称客户证件随机中文用户扩展定制服务用户出口用户界面-隐私数据发现配置用户界面-隐私数据发现结果用户

16、界面-数据漂白配置机型与配置选件：深度压缩功能 * 注：漂白速度为缺省配置下不启用压缩功能的速率机 型GM500GM1000GM2000GM3000GM5000数据空间500GB1.2TB2TB3TB6TB漂白速度8000个/秒16000个/秒25000个/秒36000个/秒50000个/秒每100G纯隐私数据脱敏参考时间2.43.6小时1.21.8小时0.81.2小时3060分钟小于30分钟竞争分析品牌IBM分别是Optim Test Data Management(TDM)产品ETL产品增加组件实现Informatica通过ETL产品增加组件方式实现Oracle在数据库的基础上增加企业选件

17、包实现云图数据目前市场存在的脱敏产品特性IBM TDMIBM DatastageOracle Data MaskingInformatica Test Data Masking云图数据Infomask即插即用流程化管理隐私数据发现功能隐私数据梳理功能本地数据漂白算法异种数据库迁移良好的扩展性流程中的数据安全性版本管理数据压缩 完全支持 部分支持 不支持 竞争分析项目周期从传统产品的几个月缩短至1天！直接连接生产与开发测试环境优势：日常使用与运维简单完全释放劳动力案例一某政府单位一卡通系统社保系统外联InfoMask开发环境测试漂白生产网段与开发环境物理隔离优势：安全操作简单提高了测试数据质量案例二银行A核心交易卡系统InfoMask开发环境测试flashcopyflashcopy报表ODS中间库生产网段开发网段切换网段漂白生产网段与开发环境物理隔离优势：安全保持原有流程不变提高了测试数据质量案例三银行B总帐信贷InfoMask开发环境