PolarDB开发者大会：分布式的PolarDB

以单机体验使用高性能分布式数据库全功能开源全功能开源通过透明分布式系列能力大幅提升业务分布式改造效率线性无感分布式扩展帮助业务连续性迎来质的飞跃用户遍及世界范围内15个国家和地区当年“双十一”峰值交易544,000笔/秒阿里云迎来分布式数据库高速发展黄金时期阿里云开启分布式数据库商业化新篇章“X”取音“extreme”取意“极致”PolarDB-X承担我国大批国计民生工程阿里巴巴由此踏上分布式数据库技术探索之路分布式数据库服务有了第一个云上用户当年“双十一”峰值交易175,000笔/秒TaobaoDistributedDataLayerDistributeRelationalDatabaseServiceTDDL阿里云数据库承载了7.8亿纳税自然人和80万税务机关人员实时在线分析查询业务和高并发的接口服务，完成税务行业落地0到1的突破，支撑起150+实时在线分析业务，包括机关人员纳税自然人机关人员数据量阿里云承载了山东省医保业务核心系统，助力医保信息平台顺利交付，参保人医保结算响应时间参保人支撑规模采用PolarDB分布式构建核心手机银行系统6数据库性能提升数据库成本下降PolarDB分布式版支撑ECIF系统数亿客户信息数据，解决超高并发吞吐、海量数据存储、大表瓶颈等集中式数据库常见瓶颈，让客户轻松进行数据库分布式改造。PolarD态对高度兼容，在摆脱传统高端存储和小型机设备高成本束缚的基础上，还可满足政策合规及行内对技术栈友好自主可控的需求。整体数据规模话单服务用户话单中国联通使用阿里云数据库替换其原有传统IT系统架构，该系统自2014年以来构建，支持全国业务cBSS系统。数据库实例API数据库实例API调用峰值使用分布式数据库的关键问题必要性兼容性使用维护成本分布式新阶段:集中与分布式一体化集中式一键升级至分布式应用带地址迁移应用带地址迁移即时原地重建元数据X-PaxosGroupDataNodeDataNodeDataNodeAPP数据自动重新分布扩展性与兼容性的平衡数据按需分布业务大表/热点表单表ST_ASTST_AST_CST_BST_DST_ABigTable_P1STST_ABigTable_P1ST_CBigTable_P3HotTable_P2ST_DHotTable_P3ST_BBigTable_P2HotTable_P1单表分散广播表复制大表水平拆分热点表打散数据分布与资源隔离隔离风险限制影响范围一级分区一级分区二级分区二级分区JUL,JUL,2023AUG,AUG,2023模板化分区模板化分区非模板化分区非模板化分区模板化分区模板化分区资源组资源组1subpartition1资源组资源组2subpartitionsubpartition2分布式新阶段:数据存储处理一体化冷热数据分区存储与查询一体化(TTL2.0)计算节点(MPP架构可横向扩展)冷热数据统一查询热数据热数据冷数据(历史分区)转存转存ORCFile数据共享#创建TTL#创建OSS归档CREATETABLEt_order_ossLIKEt_orderENGINE='OSS'ARCHIVE_MODE='TTL’#访问在线和历史oss数据SELECTXXfromt_order_ossauniont_orderwherebuyer_id=‘xx’and…ExternalExternalQueryEngineConnectorSpark最大存储成本降幅一张表同时支持行、列索引存储引擎维护索引一致性运维服务一体化原生DDL一张表同时支持行、列索引存储引擎维护索引一致性运维服务一体化原生DDL语法增删索引事务处理与分析一体化查询一体化查询一体化行列混合调度优化器数据同步延时每秒同步数据事务处理与分析一体化TSOTSO/Topology元数据管理TSO行存列存列存只读节点列存索引转储columnarcluster全局日志实时同步元数据管理TSO行存列存列存只读节点列存索引转储columnarcluster全局日志实时同步TopologyTopologyTSO/MetaBuild事务处理分布式企业级能力:金融级高可用跨可用区高可用AZAZ1离线流量AZX只读副本（AZ可选）使用2份数据副本+1份日志副本，达成多数派协议AZ3AZ1AZ2副本跨机房重建同城延迟~1ms1AZ在线变更3AZ跨地域高可用-两地三中心异地数据中心单元AZ3单元AZ4CDCLeaderLoggerCDCFollowerLoggerCDCFollowerLeaderFollowerLeaderFollowerLeaderLoggerLogger机房C异地灾备实例单元AZ2单元AZ1Follower机房A机房BFollowerFollowerFollowerFollowerFollowerFollowerCDCFollowerFollowerFollowerFollowerFollowerFollowerFollowerFollowerFollower主数据中心同城延迟~1ms异地延迟~30ms异地数据中心单元AZ3单元AZ4CDCLeaderLoggerCDCFollowerLoggerCDCFollowerLeaderFollowerLeaderFollowerLeaderLoggerLogger机房C异地灾备实例单元AZ2单元AZ1Follower机房A机房BFollowerFollowerFollowerFollowerFollowerFollowerCDCFollowerFollowerFollowerFollowerFollowerFollowerFollowerFollowerFollower主数据中心同城延迟~1ms