企业级云数据库管控架构设计与实践

企业级云数据库管控架构设计与实践Who

am

I宁海元

（江枫，NinGoo）袋鼠云联合创始人

CTO•

2007年加入淘宝DBA团队•

2009～2012

天猫双十一技术指挥部核心成员•

2012年加入手机淘宝，组建无线数据团队•

2013年翻译《高性能MySQL》第三版•

2014年阿里云数据事业部，负责数加技术团队•

2015年11月离职，联合创办袋鼠云一个老DBA的心声压力大、琐事多1个DBA

vs

几千个实例云时代，何去何从？工具是DBA的第一生产力天象EasyDB智能化：运维大数据RDS北斗tbsqlDMSDTS现代化：云服务天机DBFreedbagent中世纪：界面orzdba远古时代：脚本企业级数据库运维场景IDC托管/自建机房公共云平台云数据库RDS服务器部署Oracle服务器部署MySQL服务器部署SQL

Server云服务器部署Oracle云服务器部署MySQL云服务器部署SQL

Server企业级数据库运维需求日常运维备份恢复高可用数据安全创建/销魂实例容量/资源管理故障处理逻辑/物理备份基于时间点恢复搭建备库数据零丢失服务连续性主机可掌控数据可掌控性能优化EasyDB：企业级数据库管理平台独立部署白盒系统可视化企业完全拥有数据权限企业完全控制数据库服务器操作和数据通过Web呈现EasyDB：总体架构展现层管控层接入层监控告警高可用备份实时大屏性能分析元数据告警通道监控规则租户权限备库搭建备份恢复实例创建健康检查手动切换自动切换任务调度工作流引擎Token认证Agent消息接收消息下发HA

EngineAgent

ProxyEasyDB：数据采集Token验证消息接收Agentproxy租户B租户AAgentAgentAgentAgentEasyDB：数据采集极速：4s实时性能EasyDB：数据采集专注：经过实战的关键指标EasyDB：任务调度任务调度任务队列TaskAge

ntØ

提交任务任务执行器Ø

查看任务进度Ø

处理任务创建实例恢复数据搭建备库EasyDB：备份归档备份任务调度本机备份任务队列备份策略配置备份实时状态对象存储OSS备份线程池归档到云端查看备份情况处理异常本地存储EasyDB：MySQL

HAApplicationØ

MySQLꢀ5.6ꢀGTID双主复制，一主多从Ø

心跳&备库进度健康检查DNS/DB

ProxyØ

支持手动切换和自动切换HAEngineØ

支持对接DRDS/OneProxyØ

应用层切换无感知ReadOnlyMaster

1只读备库Master

2只读备库EasyDB：云上Oracle

HAAplicationSLBØ

云盘保证数据零丢失Ø

基于云服务器实现HA/ADGHAEngineØ

基于SLB提供统一访问入口Ø

支持手动切换和自动切换Ø

应用层切换无感知Active服务器Standby服务器SSD云盘EasyDB：HA

Engine业务数据库健康检查任务队列健康检查任务线程健康检查线程池内存元数据守护线程元数据加载线程切换任务队列HA切换线程池元数据手动切换EasyDB：HA

Engine自动切换故障判断•

数据库连接•

检测备库心跳时间•

主库写入心跳•

主库读取心跳•

备库是否恢复最新日志•

设置备库readonly=on•

应用层切换•

时间窗口内连接重试N次•

时间窗口内写入失败N次健康检测自动切换EasyDB：企业级数据库管控平台OracleMySQL/AliSQL高可用高性能阿里云Oracle独家解决方案“去IOE”利器，对接DRDS一键切换&一键备份发现并优化性能瓶颈SaaS

支持企业独立部署版EasyDB：企业级数据库管控平台Oracle阿里云上Oracle独家解决方案，帮助传统企业客户顺利上云全面支持自建Oracle场景，支持RAC、双机热备、DataGuardMySQL/AliSQL全链路MySQL/AliSQL解决方案和阿里云DRDS对接，实现分库分表，“去IOE”利器TopSQL数据库的问题90%以上都是SQL的问题各种维度分析TopSQL，及时发现并优化数据库性能瓶颈淘宝DBA十年经验沉淀，DBA的最佳助手EasyDB：企业级数据库管控平台一键切换一键切换主备库，轻松实现高可用一键备份备份策略&手动备份，确保数