PolarDB-X一体化HTAP架构助力企业级查询分析加速

适合HTAP的典型场景企业级混合负载简单查询又涉及到复杂查询企业级混合负载简单查询又涉及到复杂查询对在线数据的实时分析实时报表、金融交易预警等业务在线历史数据统一处理在线历史数据统一处理在线事务应用在线分析应用在线事务应用在线分析应用主副本提供TP服务，从副本提供AP服务一套系统，成本低，性价比高数据无延迟，可满足读一致性不足：分析性能不佳、扩展性不灵活在线事务应用在线分析应用两个系统，行存系统做在线事务，列存系统做在线分析行存系统提供TP服务，存列系统提供AP服务分析性能不错不足：数据存在延迟，难以满足读一致性在线事务应用在线分析应用在线事务应用在线分析应用一个系统，行存做在线事务，列存副本做在线分析一套系统，成本低，性价比高数据秒级延迟，可满足读一致性不足：系统稳定性要求高易用性性能低成本Serverless(未来)强成本的列存服务一体化、分布式一一张表同时支持行、列索引存储引擎维护索引一致性业务一体化服务一体化数据一体化业务一体化服务一体化应用接入成本低，架构简洁应用接入成本低，架构简洁实时同步，强一致读应用系统/客户端应用系统/客户端TPAPDeltafilesdel云盘(ontheway)Warehousecompaction权限管理元信息DeltafilesMainfilesMainfilesTSOdeldeldel面向行存的算子面向列存的向量化算子TableScan强大优化器，确保优化成不错的计划强大优化器，确保优化成不错的计划同一套算子，不同执行模式，满足各种场景计算与存储深度融合，避免额外计算负担storage存储格式（类orc）partitionsnapshotwriterfile共享存储osspartitionpartitionpartitionmemtabledeltawriterCompactionpartitionpartitionfilefilefilefilefilefilefilefile列索引构建链路•全量和增量并行构建•行存和列存分区节藕•groupcommit事务提交，保证数据完整性高可用/稳定性•高效的主键索引，支持落盘•定期快照，保证一定的RTO列存格式•类orc格式，可完整表达MySQL数据协议•支持多种索引构建，适配查询链路构建流程构建流程查询流程元信息维护ColumnarColumnar全量同步增量同步S3S1S2上传UDI获取快照信息本地缓存创建列存索引的语法创建列存索引的语法创建基本原理-用法集群部署列存只读实例行存只读实例集群地址Endpoint只读Endpoint主实例列存只读地址列存只读地址Endpoint•只访问列存，承接AP流量只读地址Endpoint•只访问只读行存，承接TP读流量集群地址Endpoint•同时访问行存和列存，承接HTAP流量•支持按照代价自动分流TP和AP性能成本数据新鲜度性能成本数据延迟常见的场景1高并发的更新数据延迟常见的场景2大表DDL标记删除技术，实现高效的数据更新写时多版本维护，异步做数据演进，实现在线DDL•强大RBO/CBO•强大RBO/CBO优化器能力，确保可以优化成相对不错的分•原生支持向量化和MPP技术，确保可以充分利用多机资源实Hologres与StarRocks性能数据来自产品官网架构带来的变化多副本TPDTS多副本AP多副本架构带来的变化多副本TPDTS多副本AP多副本TP单副本列存只收一款产品的钱定价策略的变化行存只读实例列存只读实例成本降至20%存储介质的变化存储介质的变化基于OSS存储同等数据，成本是InnoDB行存的1/20ColumnarIn