云图数据库技术介绍

1、 扬帆起航云图数据库技术介绍高 难 度传 统 国 产 数 据 库 技 术 仍 需 改 善 迁 移 风 险 高 ， 改 造 投 入 大成 本 激 增许 可 购 买 压 力 显 现 维 护 服 务 费 用 上 扬技 术 锁 定严 重 损 害 用 户 议 价 能 力 技 术 发 展 路 线 被 绑 架好用不改变使用习惯123不折腾替换过程投入低靠谱不增加风险安全合规增强透明加密 三权分立 行为审计 隐私标签提升易用性&可管理性智能运维工具 质量审核工具 数据脱敏工具基于PostgreSQL 11成熟可靠 性能优异 HTAP能力降低迁移难度Oracle兼容性 一键迁移工具 上线保障方案最佳实践产品化分

2、布式组件 高可用组件 多副本组件107x25x14x 诺贝尔奖图灵奖菲尔兹奖Julius OppenheimerEdward Teller陈省身 丘成桐 朱棣文Michael Stonebraker成立Ingres公司 1982Sybase SQLServer 1984加入Boardcom 2018Sybase ASE 1997MicrosoftSQL Server 1994加入CA Tech. 1994Illustra 1990融入到Informix 1997Greenplum 2006AtlasDB 2018主要创始人 & 主持者 图灵奖得主UCB 华人研究生 Andrew Yu & Jo

3、lly Chen 建立SQL解释系统 1995基于BSD许可Ingres 1977Postgres 1986PostgreSQL 1996PG 10 2017PG 11 2018PG 12 2019100500吞吐量（tpmC）300并发度TPC-C（100仓）简单查询吞吐量对比 OLTP场景 AtlasDB(PostgreSQL) 某开源数据库 某商业数据库SQL #1SQL #5SQL #9SQL #13SQL #17SQL #21耗时（ms）TPC-H（100GB）复杂查询耗时对比 OLAP场景某 开 源 数 据 库某 商 业 数 据 库AtlasDB(PostgreSQL)30.4%4

4、4.4%41.8%22.2%68.5%0.0%85.7%0.0%0.0%98.7%99.3%88.2%100.0%98.9%100.0%100.0%98.5%62.6%D M LD D LP L / S Q L数据类型函数包运算符系统视图预定义参数兼 容 度原生PGAtlasDB T1Oracle 兼 容 性 大 幅 增 强配 套 一 键 数 据 库 迁 移 工 具数 据 自动迁移迁 移 前 分 析迁 移 后 校验工作量评估应用移植指引迁 移 报 告校 验 报 告e x B a s e小规模场景注重快：步骤少、时间短、成本低大规模场景注重 稳 ：步步为营、减少停机、降低风险大规模数据库 平滑

5、过渡 迁移准备控速 完整抽取控速 差异抽取是否 n 分钟 数据追平差异校验 结构移植数据对象 移植源库结构 分析补充规则 设计全速 差异抽取 系统切换差异校验系统割接完成需 要 停 机 的 步 骤架构灵活支持全库复制或表级复制支持一对多复制和级联复制支持一主一备、一主多备、双活、多活资源利用率高支持单向复制或双向复制支持主备、读写分离、并行多活业务适应性强支持同步、半同步、异步复制千兆局域网场景可实现 秒 级 故 障 切 换架构成熟共享存储保障数据无差异Quorum + Fencing 防止裂脑延续传统HA集群或RAC集群拓扑架构投资保护原有服务器设备利旧利用原有核心存储设备满足传统IT系统高

6、可用需求RPO = 0，RTO = 10分钟千兆网下可实现 RTO/RPO 级别APP4APP1APP2APP3全局事务 强一致性支持读写分离高可用性架构，无单点故障在线 动态扩容数据自动重分布16节点内性能近线性提升R2 = 0.9944 1,800,0001,500,0001,200,000900,000600,000300,000-24681 01 21 41 6吞吐量（TPMC）节点数高并发场景（ T P C - C 1 0 0 仓）R2 = 0.91670100020003000400024681 01 21 41 6耗时（毫秒）节点数复杂查询场景（ 大表聚合运算）节 点 数 每 增

7、 加 1 倍 吞 吐 量 约 增 加 90%节 点 数 每 增 加 1 倍 耗 时 约 降 低 49%兆 芯处理 器AMD鲲 鹏龙 芯申 威飞 腾海 光IntelHP-UX操作系统中标麒麟银河麒麟AIXUbuntuSUSE深度中间件WeblogicTomcat金蝶东 方 通中 创宝 兰 傅Websphere外部数据MySQLOracleDB2MongoDBCassandraInfluxDBMSSQLElasticSearchHbase/ORCSparkETCHIVEImpalaRedisFilesRHELSolaris增强身份识别自主访问控制授权传播限制强制访问控制三权分立 安全标签安全审计行

8、为审计 安全阻断数据加密通讯加密 字段加密 文件加密根据过去采集的数据库运行数据进行趋势分析预测并提醒未来可能发生的风险事件，防患于未然单机分布式 集群高可用 集群调 研 规 划测 试 上 线数 据 迁 移迭 代 优 化维 护 保 障咨询顾 问服务7x24售后维保性能调优 服务驻场保 障服务数据迁 移服务安装部 署服务安 装 配 置30+ 城市2,000+ 企业客户10,000+ 业务系统广州深圳北京上海武汉杭州成都郑州南宁大连福州贵阳合肥兰州南昌南京青岛厦门沈阳庄太 原 石 家 济 南天津潍坊西安银川长春长沙重庆呼和浩 特乌鲁木 齐西宁昆明海口哈尔 滨 应用开发编码阶段SQL语句质量自查，帮

9、助开发人员培养合规意识，提 升SQL编写质量 正式投产运维阶段持续监控数据量与系统资源余量，分析应用SQL指令执行效率， 定位潜在低效SQL语句，提前解决隐患 UAT与试运行阶段全面查验数据库设计与SQL语句编写合理性与合规性，以工单形 式发起与跟踪整改任务，切实保障整体合规高效 系统迭代优化阶段数据库改造脚本自动预审与DBA复审，指定可执行时间窗口， 监控执行全过程 实时数据共享场景基于成本分析复杂查询执行计划，跟踪低效复杂查询操作，协 助对性能波动进行溯源把控数据库全生命周期的每一个关键节点，从源头发现并排除低效SQL语句和不合理数据库设计发现隐私数据能够 自动 扫描并定位企业当中的敏 感数据发现表与表之间的关联关系准确率99.5%以上漂白隐私数据保持数据的关联关系提供 高仿真度 的伪数据不可逆 算法，保证数据安全保持异常数据，确保故障点不会遗漏多种 行业专用 业务模型 政府、银行、医疗、保险、投资多种 中国特色 隐私数据模版 工商注册号、组织机构代码、纳税人 识别号、统一社会信用代码VIEWTAB1HIST_TAB1UION ALL生产数据库历史数据库FDWInfoCycle归档Client支持多种归档库可归档结构化数据和文档自动发现数