企业数据平台及数据中台解决方案

1、DSG数据平台及数据中台解决方案技术创新，变革未来目录 /CONTENTSPART 1PART 2PART 3DSG公司简介DSG数据库自主创新产品体系 DSG数据中台与数据湖证券行业70%电信行业50%政 府20%企 业1%市场与客户：超过1000+政府、大中型客户和海外客户金融证券：银河证券、长江证券、太平洋证券、西南证券、华泰证券、西部证券、宏源证券、招商基金、华夏基金、易方达基金、中国金融期 货交易所、中大期货、广发银行、太平洋保险等关键业务 (70%市场占有率)电信业务：广西移动、宁夏移动、新疆移动、北京移动、山东联通、江苏联通、湖北联通、江西联 通、辽宁联通、福建联通、新疆联通、福

2、 建电信、山东电信、内蒙电信、云南电信、海南电信、新疆电信等核心业务系统 (50%市场占有率)政府：河北地税、山西地税、上海财政、宁夏财政、武汉财政、湖南国土、公安部、广东公安、江苏公安、湖北公安、新疆公安、新疆社保、 吉林社保、南通社保、阿克苏社保、东莞社保等(涉及10大部门25个省) (30%市场占有率)企业：江西电力、青海电力、北京电力、安徽电力、湖南电力、宁夏电力、四川电力、吉林电力、河南电力、杭州供电局、各地铁路局、南京 军区总医院、一汽集团、格力电器、济南钢铁、宁波港、阿里巴巴、天富热电等 (10%市场占有率)海外：巴基斯坦电信行业、印度尼西亚电信行业、香港、澳门、台湾，等.PAR

3、T 2DSGPG数据库创新产品体系我国信息系统架构的传统模式与未来趋势PostgreSQL： 开源更需要强生态支持异构迁移：商业版数据库异构迁移开源数据库过程中，数据迁移工作是系统实施的第一步。数据库监控：开源数据库在性能、可靠性等方面尚在成长过程中，也存在众多不成熟、不可 控因素，也有必要对其进行实时有效的第三方监控，协助其产品迭代、完善、提高。数据库运维服务：开源数据库上线运行过程中，需要强大的容灾、备份、数据库救援修复、 版本计划内升级等，是必不可少的运行保障数据库复制互联：PG数据库需要实现与不同现存商业数据库、未来各类新型数据库之间数据 同步、复制、互联，确保用户在技术上能自由采用P

4、G数据库。PG与数据中台的未来：支持数据中台的上游数据源、数据中台核心组件PostgreSQL服务5、数据库 资产透视4 、 数 据 库监 控 与 鉴 责3、数据使用2、数据库灾难与救援1 、 数 据 库 和应 用迁 移 保 障IOE向国产创新迁移：MAD数据库结构透视数据库应用的兼容评估 智能规划数据库规模 数据库和应用异构迁移 数据库和应用的优化原创数据库备份容灾救援产品备份：DBP容灾: SuperSync数据库救援：冷抽取DB Res. 恶意篡改修复: Y-Loader原创数据安全使用：DataXone 数据采集、数据复制、数据治理 探测敏感数据数据库动态/静态脱敏 数据库实时增量脱敏

5、自主数据库监控权限、性能监控SQL分析与调优数据库碎片监控与处理 数据库坏块预警鉴责事中操作：TNS监控、SQL跟踪 及高危操作阻止和分析事后日志分析：全面操作回放数据库资源、敏感数据分布透视 数据库结构、操作透视数据库与应用画像DSG的PG生态体系数据库复制技术： 数据库间信息高速公路、信息系统必备存量IT领域：数据备份：用于灾难时的数据恢复数据库容灾、数据库双活容灾：用于灾 难时业务的系统 切换和业务持续运行各个单位的数据库数据的上收、下发各行业、各地区、各单位之间的内外网间信息共享、单 位之间信息共享等数据采集数据汇聚的大数据领域：各行业、各地区、各单位的数据库信息实时采集、 实时转换汇

6、聚到大数据平台各行业、各地区、各单位的数据库信息实时采集、 实时转换汇聚到大型分布式数据库中应用与数据库上云：现在与未来各行业、各单位的数据库和应用，需要一键式的上云产 品和解决方案。这背后的技术就是数据库实时复制转换技术！国产化创新：实现数据库国产化取代数据库复制技术将打通国内外数据库的信息壁垒， 支持数据和应用的迁移和保障支持国外数据库向国产数据库的汇聚等是国产化数据库时代的到来必备产品！DSG数据库复制技术：全球领先、主流数据库复制技术DSG核心技术优势1、几乎涵盖所有主流数据库 日志的实时分析技术2、统一通用的数据库数据表达 格式：XF1/XDT23、多目标端数据库数据处理和加载技术：

7、Yloader4、数据库底层数据块分析技术等等.数据库复制技术 全球原创厂家1、美国：IBM、Oracle、Dell2、中国：DSG备注：上述四家拥有原创、多源异构的数据库复制技术DSG借助自主数据库复制技术，做出世界领先：数据库备份技术数据容库灾技术数据库灾难救援技术优 势自主独立接口智能全备技术，提高数倍效率降低存储需求75%，恢复速度与传统相比可提高近10倍迁移实现数据库1Tbit/小时的同步速度，可实现零停机的数据库迁移降低对生产系统的影响，保证系统干扰低于与5%自主高级备份与高性能DBP的技术原理：块级增量+版本合成+定时恢复数据库备份容灾救援：数据库容灾SuperSync优势：全部

8、自主知识产权实现多种主流数 据库及各类云端的高效日志分析、不中断业务 的首次全同步、实时增量同步、数据复制迁移 统一的数据复制平台。技术性能全球领先！在数据库已被损坏的状态下，可以直接采用冷库抽取技术，从存储物理硬件上提取数据，保证数据可再使用。PostgreSQL 数据库自主救援工具OracleSQLServerK-DBDB2MySQLPostgr eSQLDMCDB中间库第三方 ETL接口文件结构化数据大数据/云源ETL过程目标端用户实时多表关联镜像库精简库数据仓库数据 抓取 模块实时 Loader实时单表转换过滤准实时镜像库精简库Enhanced ETL数据库实时交换与共享平台技术对比D

9、SG Enhanced ETL通用（传统）ETL获取数据变化的方式在线日志数据库JDBC/ODBC接口原生产端资源占用1-3%30-100%源端数据捕获实时（延迟1-5秒种）往往是界定一天取一次，且是在晚上获取数据导出数据初始化同步效率实时高性能（单数据库数百GB/小时）定时数据转换过滤清洗的过程实时。一个环节，源直接到目标，不需要落 地等中间过程需四个环节：源抽取并加载到一个中间数据库；中间库中做转换、清洗等操 作；中间库输出文件；将文件加载到目标数据库中数据质量支持实时对比批量对比。出错时，由于诸多环节导致核查效率低，修复数据时又要将所有数据 处理一便，耗时数天以上修复单表或者单条记录支持

10、不支持DDL支持不支持。导致源端有DDL操作时，需要被动地重新配置接口参数，维护工作量 大LOB等数据支持不支持支持大数据复制的订制加载可灵活 订制不支持网络带宽占用是ETL的1%在批量抽取同步时带宽高实施、维护自动化程度图形化监控运维图形化定制开发支持不支持专业领域采集、复制、迁移、同步、共享采集DSG Enhanced ETL 与 传统ETL对比DSG数据库生态篇-监控产品自主数据库监控：混合时代的监控全方位的多数据库实时监控，日志、TNS访问、 数据块分析全球独家支持数据库坏块、碎片监控分析数据库历史统计分析监控异常告警提示数据库策略制定和管理信息查询与统计，实现事件回放数据精确修复外部

11、安全态势分析权限管理数据库日常检查和维护服务专业大型数据库迁移服务专业数据库重整和碎片清理服务专业数据库割接和硬件升级保障服务数据库专业咨询与技术培训服务数据库 监控数据库 分析透视数据库 专业服务数据库运行状态监控自主数据库监控：全局运行状态监控优势自主体系多服务器性能监控支持多服务器并 发监控，对数据库服务器的CPU、 内存、磁盘及服务器进程运行情况 进行全面监控全方位的多数据库实时监控数据文 件、表空间、SGA、等待事件、归 档日志等信息，提供详尽的数据库 运行情况剖析自主数据库监控平台：SQL语句性能展示自主数据库监控平台：资源与性能自主数据库监控平台：数据复制共享监控PART 3DS

12、G数据中台和数据湖数据收集难l现有采集方式依赖原有系统厂商的配合，需要多个业务系统厂商对接，采集过程消耗多、效率低l采集技术不够先进，采用开源工具、JDBC、ODBC方式，源端干扰巨大，直接导致医院系统崩溃l源端数据发生变化需要数据出问题以后依靠人力定位和发现难以适应 标准演进l前期建设规划与架构只注重当前，难以满足医疗行业标准、业务需求和数据应用的发展l每次新的医疗数据需求变化就需要重新采集一次数据l每次新的医疗业务变化就需要建立一个新的系统，导致重复建设数据治理难l数据治理不到位，数据质量低下，难以保证数据的可用性、一致性、准确性l数据标准不统一、相关标准规范仍需完善l类型多样化和异源异构、数据可用性低、数据质量需要有效的监控管理l数据安全能力和防范意识差，极易导致数据泄露大数据采集与数据治理：DSG解决以下挑战与痛点采集与治理趋势： DSG的采集治理面向数据挖掘与人工智能数据中台与数据湖：真正实现端到端数据治理数据中台与数据湖：数据应用服务创建应用：用户描述对新创建应用的目的和功能；申请专题/数据：根据实际需求，在大数据综合服务门户上申请应用所需的 数据，并选择合适的数据对接方式；认