2023云栖大会：PolarDB-PG特性解析及最佳实践

云原生时代的新PG：阿里云PolarDBPostgreSQL产品部负责人主备架构的特点主备架构的特点主备架构的不足APSARA云栖大会传统主备数据库架构的不足传统主备数据库架构的不足主库备库云原生云原生•高扩展性：分钟级加减节点，可扩展到16个计算节企业级•低成本：资源池化利用率高；增加计算节点存储成本不变•高安全：支持SSL、TDE、SQL审计等安全需求APSARA云栖大会智能代理Application数据存储节点数据存储节点数据存储节点计算节点cacaacBufferpoolOutdateBackgrounWALBufferpoolCopyWALMetaInactiveMemTableWALActiveMemTableWriteWALStreamingWAL按LSNWALFilesLogIndexSynchronousAsynchronous数据同步BufferpoolOutdateBackgrounWALBufferpoolCopyWALMetaInactiveMemTableWALActiveMemTableWriteWALStreamingWAL按LSNWALFilesLogIndexSynchronousAsynchronous数据同步节点增加过程APSARA云栖大会应用连接智能代理更新/查询类SQL应用连接智能代理更新/查询类SQL查询类SQLAPSARA云栖大会查询路由原理查询路由原理•一个应用连接对应后端N个连接（N为节点数）基于共享存储的基于共享存储的MPP•跨机并行，性能优异，扫描性能可达150GB/s以上APSARA云栖大会读写节点只读节点只读节点只读节点只读节点存储层存储节点存储节点存储节点存储节点25%*totalMem25%*totalMem25%*totalMem50%*25%*totalMem25%*totalMem25%*totalMem50%*totalMem效果APSARA云栖大会APSARA云栖大会效果TPSTPSTPSTPSAPSARA云栖大会046,4580开源PG309,413APSARA云栖大会老大难问题隐式类型转换兼容Oracle的类型隐式转换规则矩阵，且支持高精度到低精度的转换关键字别名大小写在存储默认小写的情况下，支持表、列等对象的大小写不敏感识别数据类型及编码日期类型全兼容GBK/GB18030编码支持GBK/GB18030服务器编码格式自研connectby支持完整兼容Oracle层次查询功能支持包括countorderby、distSQL命令context功能支持createcontext、sys_context、dbms_session功能subquery修改视图的基础表类型触发器支持登录登出触发器，提供了可以在用户登录/登出时触发指定函数或存储过程的功能。内置对象dbms_metadata通过DBMS_METADATA提供的方法获取数据库对象的元数据信息，用于重建数据库中的对象内置函数wm_concat、bitand、to_dsinterval、to_yminterval等内置视图all_*/dba_*/user_*等视图完善APSARA云栖大会Geometry&GeographyTrajectorySfMesh支持BIM数据的存储与计算VoMeshSceneGeomGrid/H3Grid支持激光点云数据的存储与计算支持拓扑图数据的存储与计算SuperViz支持全空间数据类型的快速可视化应用连接智能代理后端连接应用连接智能代理后端连接APSARA云栖大会内置连接池原理内置连接池原理•应用连接发起时，如果连接池没有空闲连某游戏行业客户使用PolarProxy连接池的效果计算节点共享内存计算节点共享内存PG后台进程进程私有内存APSARA云栖大会PGPG内存管理机制的不足进程私有内存中容易触发内存不足和数据库宕机内存全局化存APSARA云栖大会GlobalCatalogGlobalCatalogCacheGlobalRelationCacheGlobal共享内存PG后台进程进程私有内存进程私有内存内存全局化内存全局化级小版本打开整参数设置每种全局Cache的大小某客户使用全局内存后的效果分区表T分区1：date=1月分区2：date分区表T分区1：date=1月分区2：date=2月分区3：date=3月分区5：date=5月全局索引Whereorder_id=‘12345678’全局索引分区表优化APSARA云栖大会一体化一体化HTAP原理节点（ADB集群）实现实时数据分析•根据规则或代价估算，自动动态路由查询到TP或AP加速效果APSARA云栖大会ADBClusterSegmentSegmentSegmentAPSARA云栖大会冷热分层架构SharedStorage表级自动冷热数据分层原理表级自动冷热数据分层原理•将OSS作为全量数据存储介质，云盘/PolarStore作技术指标•写入性能下降10%以内，重复点查性能下降15%以APSARA云栖大会极致性价比的标准版与经济版极致性价比的标准版与经济版云盘 Application存储集群计算节点标准版与经济版标准版与经济版与企业版区别推出标准版推出标准版经济版Serverless版APSARA云栖大会企业版企业版分析节点加速节点内并行分析节点加速节点内并行APSARA云栖大会数据分析加速方案数据分析加速方案节点间并行节点间并行数据分析APSARA云栖大会性能与SQL洞察GAWRAPSARA云栖大会使用使用pgvector插件支持AIGC产品功能全面开源产品功能全面开源APSARA云栖大会新增代码行数新增功能项专职开发者技术沉淀历程开源共享存储架构开源LogIndex/DirectIO2021.52021.102022.62023.10APSARA云栖大会欢迎关注PolarDB-PG•PolarDB免费试用：/?